<html><head><meta http-equiv="content-type" content="text/html; charset=utf-8"></head><body dir="auto"><div>Ah, so an issue with the NSD nodes, as opposed the clients?<br><br></div><div><br>On 29 Nov 2016, at 20:56, Luis Bolinches <<a href="mailto:luis.bolinches@fi.ibm.com">luis.bolinches@fi.ibm.com</a>> wrote:<br><br></div><blockquote type="cite"><div><div class="socmaildefaultfont" dir="ltr" style="font-family:Arial, Helvetica, sans-serif;font-size:10.5pt"><div dir="ltr">Its been around in certain cases, some kernel <-> storage combination get hit some not</div>
<div dir="ltr"> </div>
<div dir="ltr">Scott referenced it here <a href="https://www.ibm.com/developerworks/community/wikis/home?lang=en#!/wiki/General+Parallel+File+System+%28GPFS%29/page/Storage+with+GPFS+on+Linux">https://www.ibm.com/developerworks/community/wikis/home?lang=en#!/wiki/General+Parallel+File+System+%28GPFS%29/page/Storage+with+GPFS+on+Linux</a></div>
<div dir="ltr"> </div>
<div dir="ltr"><a href="https://access.redhat.com/solutions/2437991">https://access.redhat.com/solutions/2437991</a></div>
<div dir="ltr"> </div>
<div dir="ltr">It happens also on 7.2 and 7.3 ppc64 (not yet on the list of "supported") it does not on 7.1. I can confirm this at least for XIV storage, that it can go up to 1024 only.</div>
<div dir="ltr"> </div>
<div dir="ltr">I know the FAQ will get updated about this, at least there is a CMVC that states so.</div>
<div dir="ltr"> </div>
<div dir="ltr">Long short, you create a FS, and you see all your paths die and recover and die and receover and ..., one after another. And it never really gets done. Also if you boot from SAN ... well you can figure it out ;)</div>
<div dir="ltr"> </div>
<div dir="ltr"><div class="mail-signature-container"><br>--<br>Ystävällisin terveisin / Kind regards / Saludos cordiales / Salutations<br><br>Luis Bolinches<br>Lab Services<br><a href="http://www-03.ibm.com/systems/services/labservices/">http://www-03.ibm.com/systems/services/labservices/</a><br><br>IBM Laajalahdentie 23 (main Entrance) Helsinki, 00330 Finland<br>Phone: +358 503112585<br><br>"If you continually give you will continually have." Anonymous</div></div>
<div dir="ltr"> </div>
<div dir="ltr"> </div>
<blockquote data-history-content-modified="1" dir="ltr" style="border-left:solid #aaaaaa 2px; margin-left:5px; padding-left:5px; direction:ltr; margin-right:0px">----- Original message -----<br>From: Nathan Harper <<a href="mailto:nathan.harper@cfms.org.uk">nathan.harper@cfms.org.uk</a>><br>Sent by: <a href="mailto:gpfsug-discuss-bounces@spectrumscale.org">gpfsug-discuss-bounces@spectrumscale.org</a><br>To: gpfsug main discussion list <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>><br>Cc:<br>Subject: Re: [gpfsug-discuss] Upgrading kernel on RHEL<br>Date: Tue, Nov 29, 2016 10:44 PM<br> <br><!--Notes ACF
<meta http-equiv="content-type" content="text/html; charset=utf8" >-->
<div>This is the first I've heard of this max_sectors_kb issue, has it already been discussed on the list? Can you point me to any more info?<br><br> </div>
<div><br>On 29 Nov 2016, at 19:08, Luis Bolinches <<a href="mailto:luis.bolinches@fi.ibm.com" target="_blank">luis.bolinches@fi.ibm.com</a>> wrote:<br> </div>
<blockquote type="cite"><div><div dir="ltr" style="font-family:Arial, Helvetica, sans-serif;font-size:10.5pt"><div dir="ltr">Seen that one on 6.8 too</div>
<div dir="ltr"> </div>
<div dir="ltr">teh 4096 does NOT work if storage is XIV then is 1024</div>
<div dir="ltr"> </div>
<div dir="ltr"><div class="mail-signature-container"><br>--<br>Ystävällisin terveisin / Kind regards / Saludos cordiales / Salutations<br><br>Luis Bolinches<br>Lab Services<br><a href="http://www-03.ibm.com/systems/services/labservices" target="_blank">http://www-03.ibm.com/systems/services/labservices</a>/<br><br>IBM Laajalahdentie 23 (main Entrance) Helsinki, 00330 Finland<br>Phone: +358 503112585<br><br>"If you continually give you will continually have." Anonymous</div></div>
<div dir="ltr"> </div>
<div dir="ltr"> </div>
<blockquote data-history-content-modified="1" dir="ltr" style="border-left:solid #aaaaaa 2px; margin-left:5px; padding-left:5px; direction:ltr; margin-right:0px">----- Original message -----<br>From: "Kevin D Johnson" <<a href="mailto:kevindjo@us.ibm.com" target="_blank">kevindjo@us.ibm.com</a>><br>Sent by: <a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" target="_blank">gpfsug-discuss-bounces@spectrumscale.org</a><br>To: <a href="mailto:gpfsug-discuss@spectrumscale.org" target="_blank">gpfsug-discuss@spectrumscale.org</a><br>Cc: <a href="mailto:gpfsug-discuss@spectrumscale.org" target="_blank">gpfsug-discuss@spectrumscale.org</a><br>Subject: Re: [gpfsug-discuss] Upgrading kernel on RHEL<br>Date: Tue, Nov 29, 2016 8:48 PM<br> 
<div dir="ltr" style="font-family:Arial, Helvetica, sans-serif;font-size:10.5pt"><div dir="ltr">I have run into the max_sectors_kb issue and creating a file system when moving beyond 3.10.0-327 on RH 7.2 as well.  You either have to reinstall the OS or walk the kernel back to 327 via:
<div><br><a href="https://access.redhat.com/solutions/186763" target="_blank">https://access.redhat.com/solutions/186763</a></div> 

<div>Kevin D. Johnson, MBA, MAFM<br><span style="font-size: 0.786em;">Spectrum Computing, Senior Managing Consultant<br><br><span style="color:#696969;">IBM Certified Deployment Professional - Spectrum Scale V4.1.1<br>IBM Certified Deployment Professional - Cloud Object Storage V3.8</span></span></div>
<div><div class="mail-signature-container"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr" style="font-family:Arial;font-size:10.5pt"><div dir="ltr"><div style="font-size: 10pt; font-weight: bold; font-family: sans-serif;"><div><span style="color:#696969;"><span style="font-size: 0.786em;">IBM Certified Solution Advisor - Spectrum Computing V1</span></span></div>
<div> </div>
<div><span style="color:#696969;"><span style="font-size: 0.786em;">720.349.6199 - <a href="mailto:kevindjo@us.ibm.com" target="_blank">kevindjo@us.ibm.com</a></span></span></div></div>
<div style="font-size: 8pt; font-family: sans-serif; margin-top: 10px;"><div> </div></div></div></div></div></div></div></div></div></div></div></div></div></div></div>
<div> </div>
<div> </div>
<blockquote data-history-content-modified="1" style="border-left:solid #aaaaaa 2px; margin-left:5px; padding-left:5px; direction:ltr; margin-right:0px">----- Original message -----<br>From: "Luis Bolinches" <<a href="mailto:luis.bolinches@fi.ibm.com" target="_blank">luis.bolinches@fi.ibm.com</a>><br>Sent by: <a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" target="_blank">gpfsug-discuss-bounces@spectrumscale.org</a><br>To: <a href="mailto:gpfsug-discuss@spectrumscale.org" target="_blank">gpfsug-discuss@spectrumscale.org</a><br>Cc: <a href="mailto:gpfsug-discuss@spectrumscale.org" target="_blank">gpfsug-discuss@spectrumscale.org</a><br>Subject: Re: [gpfsug-discuss] Upgrading kernel on RHEL<br>Date: Tue, Nov 29, 2016 5:20 AM<br> 
<div dir="ltr" style="font-family:Arial, Helvetica, sans-serif;font-size:10.5pt"><div dir="ltr">My 2 cents</div>
<div dir="ltr"> </div>
<div dir="ltr">And I am sure different people have different opinions.</div>
<div dir="ltr"> </div>
<div dir="ltr">New kernels might be problematic.</div>
<div dir="ltr"> </div>
<div dir="ltr">Now got my fun with RHEL 7.3 kernel and max_sectors_kb for new FS. Is something will come to the FAQ soon. It is already on draft not public.</div>
<div dir="ltr"> </div>
<div dir="ltr">I guess whatever you do .... get a TEST cluster and do it there first, that is better the best advice I could give.</div>
<div dir="ltr"> </div>
<div dir="ltr"><div class="mail-signature-container"><br>--<br>Ystävällisin terveisin / Kind regards / Saludos cordiales / Salutations<br><br>Luis Bolinches<br>Lab Services<br><span><a href="http://www-03.ibm.com/systems/services/labservices" target="_blank">http://www-03.ibm.com/systems/services/labservices</a></span>/<br><br>IBM Laajalahdentie 23 (main Entrance) Helsinki, 00330 Finland<br>Phone: +358 503112585<br><br>"If you continually give you will continually have." Anonymous</div></div>
<div dir="ltr"> </div>
<div dir="ltr"> </div>
<blockquote data-history-content-modified="1" dir="ltr" style="border-left:solid #aaaaaa 2px; margin-left:5px; padding-left:5px; direction:ltr; margin-right:0px">----- Original message -----<br>From: "Sobey, Richard A" <<a href="mailto:r.sobey@imperial.ac.uk" target="_blank">r.sobey@imperial.ac.uk</a>><br>Sent by: <a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" target="_blank">gpfsug-discuss-bounces@spectrumscale.org</a><br>To: "'<a href="mailto:gpfsug-discuss@spectrumscale.org" target="_blank">gpfsug-discuss@spectrumscale.org</a>'" <<a href="mailto:gpfsug-discuss@spectrumscale.org" target="_blank">gpfsug-discuss@spectrumscale.org</a>><br>Cc:<br>Subject: [gpfsug-discuss] Upgrading kernel on RHEL<br>Date: Tue, Nov 29, 2016 11:59 AM<br> <br><!--Notes ACF
<meta http-equiv="Content-Type" content="text/html; charset=utf8" >--> <!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit" >
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
<div><p>All,<o:p></o:p></p>
<p><o:p> </o:p></p>
<p>As a general rule, when updating GPFS to a newer release, would you perform a full OS update at the same time, and/or update the kernel too?<o:p></o:p></p>
<p><o:p> </o:p></p>
<p>Just trying to gauge what other people do in this respect. Personally I’ve always upgraded everything at once – including kernel. Am I looking for trouble?<o:p></o:p></p>
<p><o:p> </o:p></p>
<p>Cheers<o:p></o:p></p>
<p>Richard<o:p></o:p></p></div>
<div><font size="2" face="Default Monospace,Courier New,Courier,monospace">_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at <a href="http://spectrumscale.org" target="_blank">spectrumscale.org</a><br><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a></font></div></blockquote>
<div dir="ltr"> </div></div><br>Ellei edellä ole toisin mainittu: / Unless stated otherwise above:<br>Oy IBM Finland Ab<br>PL 265, 00101 Helsinki, Finland<br>Business ID, Y-tunnus: 0195876-3<br>Registered in Finland<br> 
<div><font size="2" face="Default Monospace,Courier New,Courier,monospace">_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at <a href="http://spectrumscale.org" target="_blank">spectrumscale.org</a><br><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a></font></div></blockquote>
<div> </div></div></div> 

<div><font size="2" face="Default Monospace,Courier New,Courier,monospace">_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at <a href="http://spectrumscale.org" target="_blank">spectrumscale.org</a><br><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a></font></div></blockquote>
<div dir="ltr"> </div></div><br>Ellei edellä ole toisin mainittu: / Unless stated otherwise above:<br>Oy IBM Finland Ab<br>PL 265, 00101 Helsinki, Finland<br>Business ID, Y-tunnus: 0195876-3<br>Registered in Finland<br> </div></blockquote>
<blockquote type="cite"><div><span>_______________________________________________</span><br><span>gpfsug-discuss mailing list</span><br><span>gpfsug-discuss at <a href="http://spectrumscale.org" target="_blank">spectrumscale.org</a></span><br><span><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a></span></div></blockquote>
<div><font size="2" face="Default Monospace,Courier New,Courier,monospace">_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at <a href="http://spectrumscale.org">spectrumscale.org</a><br><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a></font></div></blockquote>
<div dir="ltr"> </div></div><br>
Ellei edellä ole toisin mainittu: / Unless stated otherwise above:<br>
Oy IBM Finland Ab<br>
PL 265, 00101 Helsinki, Finland<br>
Business ID, Y-tunnus: 0195876-3 <br>
Registered in Finland<br>
<br>

</div></blockquote><blockquote type="cite"><div><span>_______________________________________________</span><br><span>gpfsug-discuss mailing list</span><br><span>gpfsug-discuss at <a href="http://spectrumscale.org">spectrumscale.org</a></span><br><span><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a></span><br></div></blockquote></body></html>