<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<style type="text/css" style="display:none"><!--P{margin-top:0;margin-bottom:0;} p
        {margin-top:0;
        margin-bottom:0}--></style>
</head>
<body dir="ltr" style="font-size:12pt;color:#000000;background-color:#FFFFFF;font-family:Calibri,Arial,Helvetica,sans-serif;">
<p>Hi All,<br>
</p>
<p><br>
</p>
<p>Thanks to Doug and Kevin for the replies. &nbsp;In answer to Kevin's question about our choice of clustering solution for NFS: &nbsp;the choice was made hoping to maintain some simplicity by not using more than one HA solution at a time. &nbsp;However, it seems that this
 choice might have introduced more wrinkles than it's ironed out.<br>
</p>
<p><br>
</p>
<p>An update on our situation: &nbsp;we have actually uncovered another clue since my last posting. &nbsp;One thing that this now known to be correlated *very* closely with instability in the NFS layer is running `mmcrsnapshot`.&nbsp; &nbsp; We had noticed that flapping happened
 like clockwork at midnight every night.&nbsp; This happens to be the same time at which our crontab was running the `mmcrsnapshot` so, as an experiment, we moved the snapshot to happen at 1a.</p>
<p><br>
</p>
<p>After this change, the late-night flapping has moved to 1a and now happens reliably every night at that time. &nbsp;I saw a post on this list from 2013 stating that `mmcrsnapshot` was known to hang up the filesystem with race conditions that result in deadlocks
 and am wondering if that is still a problem with&nbsp;the `mmcrsnapthost` command. &nbsp;Running the snapshots had not been an obvious problem before, but seems to have become one since we deployed ~300 additional GPFS clients in a remote cluster configuration about
 a week ago.</p>
<p><br>
</p>
<p>Can anybody comment on the safety of running `mmcrsnapshot` with a ~300 node remote cluster accessing the filesystem?</p>
<p><br>
</p>
<p>Also, I would comment that this is not the only condition under which we see instability in the NFS layer.&nbsp; We continue to see intermittent instability through the day. &nbsp;The creation of a snapshot is simply the one well-correlated condition that we've discovered
 so far.</p>
<p><br>
</p>
<p>Thanks so much to everyone for your help &nbsp;:)<br>
</p>
<p><br>
</p>
<p>Stewart<br>
</p>
</body>
</html>