<div dir="ltr"><div class="gmail_default" style="font-family:tahoma,sans-serif"><span style="font-family:Arial,Helvetica,sans-serif">Hi All:</span><br></div><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><br>I'm performing a rolling upgrade of one of our GPFS clusters.  This particular cluster has 2 CNFS servers for some of our NFS clients.  I wiped one of the nodes and installed RHEL 8.1 and GPFS 5.0.4.2.  The filesystem mounts fine on the node when I disable CNFS on the node, but with it enabled it's a no go.  It appears mmnfsmonitor doesn't recognize that nfsd has started, so it assumes the worst and shuts down the file system (I currently have reboot on failure disabled to debug this).  The thing is, it actually does start nfsd processes when running mmstartup on the node.  Doing a "ps" shows 32 nfsd threads are running.<br><br>Below is <span class="gmail_default" style="font-family:tahoma,sans-serif">the </span>CNFS-specific output from an attempt to start the node:<br><br>CNFS[27243]: Restarting lockd to start grace<br>CNFS[27588]: Enabling 172.16.69.76<br>CNFS[27694]: Restarting lockd to start grace<br>CNFS[27699]: Starting NFS services<br>CNFS[27764]: NFS clients of node 172.16.69.122 notified to reclaim NLM locks<br>CNFS[27910]: Monitor has started pid=27787<br>CNFS[28702]: Monitor detected nfsd was not running, will attempt to start it<br>CNFS[28705]: Starting NFS services<br>CNFS[28730]: NFS clients of node 172.16.69.122 notified to reclaim NLM locks<br>CNFS[28755]: Monitor detected nfsd was not running, will attempt to start it<br>CNFS[28758]: Starting NFS services<br>CNFS[28789]: NFS clients of node 172.16.69.122 notified to reclaim NLM locks<br>CNFS[28813]: Monitor detected nfsd was not running, will attempt to start it<br>CNFS[28816]: Starting NFS services<br>CNFS[28844]: NFS clients of node 172.16.69.122 notified to reclaim NLM locks<br>CNFS[28867]: Monitor detected nfsd was not running, will attempt to start it<br>CNFS[28874]: Monitoring detected NFSD is inactive. mmnfsmonitor: NFS server is not running or responding. Node failure initiated as configured.<br>CNFS[28924]: Unexporting all GPFS filesystems<br><br>Any thoughts?  My other CNFS node is handling everything for the time being, thankfully!<br><br></div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature">Thanks,<br>Bryan<br><br>---<br>Bryan Hill<br>Lead System Administrator<br>UCSD Physics Computing Facility<br><br>9500 Gilman Dr.  # 0319<br>La Jolla, CA 92093<br>+1-858-534-5538<br><a href="mailto:bhill@ucsd.edu" target="_blank">bhill@ucsd.edu</a></div></div></div>