<div dir="ltr"><div>Hi Chris,</div><div><br></div>I think the next thing to double-check is when the maxMBpS change takes effect.  You may need to restart the nsds.  Otherwise I think your plan is sound.<div><br></div><div>Regards,</div><div>Alex<br><div><br></div></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Mon, Jun 17, 2019 at 9:24 AM Christopher Black <<a href="mailto:cblack@nygenome.org">cblack@nygenome.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">





<div lang="EN-US">
<div class="gmail-m_1045570455577371731WordSection1">
<p class="MsoNormal"><span style="font-size:11pt">Our network team sometimes needs to take down sections of our network for maintenance. Our systems have dual paths thru pairs of switches, but often the maintenance will take down one of the two paths leaving
 all our nsd servers with half bandwidth.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt">Some of our systems are transmitting at a higher rate than can be handled by half network (2x40Gb hosts with tx of 50Gb+).<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt">What can we do to gracefully handle network maintenance reducing bandwidth in half?<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt">Should we set maxMBpS for affected nodes to a lower value? (default on our ess appears to be maxMBpS = 30000, would I reduce this to ~4000 for 32Gbps?)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt">Any other ideas or comments?<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt">Our hope is that metadata operations are not affected much and users just see jobs and processes read or write at a slower rate.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt">Best,<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11pt">Chris<u></u><u></u></span></p>
</div>
<hr>
<div style="font-size:7.5pt;font-family:arial;font-style:normal;font-weight:normal">
This message is for the recipient’s use only, and may contain confidential, privileged or protected information. Any unauthorized use or dissemination of this communication is prohibited. If you received this message in error, please immediately notify the
 sender and destroy all copies of this message. The recipient should check this email and any attachments for the presence of viruses, as we accept no liability for any damage caused by any virus transmitted by this email.</div>
</div>

_______________________________________________<br>
gpfsug-discuss mailing list<br>
gpfsug-discuss at <a href="http://spectrumscale.org" rel="noreferrer" target="_blank">spectrumscale.org</a><br>
<a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" rel="noreferrer" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a><br>
</blockquote></div>