<div dir="auto">Move the file system manager :)</div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, 20 Feb 2020, 19:45 Simon Thompson, <<a href="mailto:S.J.Thompson@bham.ac.uk">S.J.Thompson@bham.ac.uk</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">




<div dir="ltr">
<div id="m_8347810724761046145divtagdefaultwrapper" style="font-size:12pt;color:#000000;font-family:Calibri,Helvetica,sans-serif" dir="ltr">
<p>Hi,</p>
<p><br>
</p>
<p>We have a snapshot which is stuck in the state "<span>DeleteRequired". When deleting, it goes through the motions but eventually gives up with:</span></p>
<p><span></span></p>
<div>Unable to quiesce all nodes; some processes are busy or holding required resources.</div>
<div>mmdelsnapshot: Command failed. Examine previous error messages to determine cause.</div>
<br>

<p></p>
<p><span>And in the mmfslog on the FS manager there are a bunch of retries and "failure to quesce" on nodes. However in each retry its never the same set of nodes. I suspect we have one HPC job somewhere killing us.</span></p>
<p><span><br>
</span></p>
<p><span>What's interesting is that we can delete other snapshots OK, it appears to be one particular fileset.</span></p>
<p><span><br>
</span></p>
<p><span>My old goto "<span>mmfsadm dump tscomm" isn't showing any particular node, and waiters around just tend to point to the FS manager node.</span></span></p>
<p><span><span><br>
</span></span></p>
<p><span><span>So ... any suggestions? I'm assuming its some workload holding a lock open or some such, but tracking it down is proving elusive!</span></span></p>
<p><span><span><br>
</span></span></p>
<p><span><span>Generally the FS is also "lumpy" ... at times it feels like a wifi connection on a train using a terminal, I guess its all related though.</span></span></p>
<p><span><span><br>
</span></span></p>
<p><span><span>Thanks</span></span></p>
<p><span><span><br>
</span></span></p>
<p><span><span>Simon </span></span></p>
</div>
</div>

_______________________________________________<br>
gpfsug-discuss mailing list<br>
gpfsug-discuss at <a href="http://spectrumscale.org" rel="noreferrer noreferrer" target="_blank">spectrumscale.org</a><br>
<a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" rel="noreferrer noreferrer" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a><br>
</blockquote></div>