<div dir="ltr">Hi :-)<div><br></div><div>I seem to remember failure group 4001 was common at some point, but can't see why.. Maybe it was just the default when no failure group was specified ? Have you tried what happens if you use an empty failure group "::", does it default to "-1" on v3.4 -- or maybe "4001"?</div><div><br></div><div>You might consider changing the failure groups of the existing disks using mmchdisk if you need them to be the same.</div><div><br></div><div><br></div><div>Pro's and cons of using another failure group.. Depends a bit on if they're using any replication within the filesystem. If all other NSDs are in failure group 4001 -- they can't be doing any replication, so it doesn't matter much. Only side effect I know of is that new block allocations will first go round robin over the failure groups, then round robin within the failure group, so unless you have similar amount of disks in the two failure groups the disk load might become a bit uneven.</div><div><br></div><div><br></div><div>  -jf</div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Apr 1, 2016 at 1:04 PM, Jan Finnerman Load <span dir="ltr"><<a href="mailto:jan.finnerman@load.se" target="_blank">jan.finnerman@load.se</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">



<div style="word-wrap:break-word">
<div style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:14px">
Hi,</div>
<div style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:14px">
<br>
</div>
<div style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:14px">
I have a customer with GPFS 3.4.0.11 on Windows @VMware with VMware Raw Device Mapping. They just ran in to an issue with adding some nsd disks.</div>
<div style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:14px">
They claim that their current file system’s nsddisks are specified with 4001 as the failure group. This is out of bounds, since the allowed range is –1>–—>4000.</div>
<div style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:14px">
So, when they now try to add some new disks with mmcrnsd, with 4001 specified, they get an error message.</div>
<div style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:14px">
<br>
</div>
<div>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV">Customer runs this command: mmcrnsd -F D:\slask\gpfs\gpfsdisk.txt<u></u><u></u></span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<img width="615" height="43" src="cid:B13E252A-3014-49AD-97EE-6E9B4D57A9F4" alt="Description: cid:image001.png@01D18B5D.FFCEFE30" type="image/png"><span lang="SV"><u></u><u></u></span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV"> </span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV"> </span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV">His gpfsdisk.txt file looks like this.<u></u><u></u></span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<img width="537" height="22" src="cid:7A01C40C-085E-430C-BA95-D4238AFE5602" alt="Description: cid:image002.png@01D18B5D.FFCEFE30" type="image/png"><span lang="SV"><u></u><u></u></span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV"> </span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV"> </span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV">A listing of current disks show all as belonging to Failure group 4001<u></u><u></u></span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<img width="647" height="109" src="cid:446525C9-567E-4B06-ACA0-34865B35B109" alt="Description: cid:image003.png@01D18B5D.FFCEFE30" type="image/png"><span lang="SV"><u></u><u></u></span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV"> </span></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
So, Why can’t he choose f<span style="font-size:11pt">ailure group 4001 when the existing disks are member of that group ?</span></p>
<p class="MsoNormal" style="margin:0cm 0cm 0.0001pt"><font face="Calibri,sans-serif" size="3">If he creates a disk in an other failure group, what</font><font face="Calibri,sans-serif"><span style="font-size:15px">’</span></font><font face="Calibri,sans-serif" size="3">s
 the pros and cons with that ? I guess issues with replication not working as expected…. </font></p>
<p class="MsoNormal" style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:11pt;margin:0cm 0cm 0.0001pt">
<span lang="SV"><br>
</span></p>
</div>
<div style="color:rgb(0,0,0);font-family:Calibri,sans-serif;font-size:14px">
<div>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
Brgds</p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="color:rgb(31,73,125)">///Jan</span></p>
<div style="font-size:medium">
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<br>
</p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<img src="cid:95049B1E-9581-4B5E-8878-5BC3F3371B27" type="image/png"></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="color:rgb(23,54,93)">Jan Finnerman<u></u><u></u></span></p>
<p class="MsoNormal" style="margin:0cm 0cm 0.0001pt;font-size:11pt"><span style="color:rgb(0,0,128);font-size:16px;background-color:rgb(255,255,255)">Senior Technical consultant</span></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<br>
</p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="color:rgb(23,54,93)"><img width="106" height="51" src="cid:8EFB7788-AF79-4748-A2FE-817732210436" alt="CertTiv_sm" type="image/png"></span></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<br>
</p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<img src="cid:DB2EE70A-D139-4B15-B58C-5BD987D2FAB5" type="image/png" style="font-family:Calibri;font-size:medium"></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="color:rgb(31,73,125);font-size:9pt">Kista Science Tower</span></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="font-size:9pt;color:rgb(31,73,125)">164 51 Kista<u></u><u></u></span></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="font-size:9pt;color:rgb(31,73,125)">Mobil: <a href="tel:%2B46%20%280%2970%20631%2066%2026" value="+46706316626" target="_blank">+46 (0)70 631 66 26</a><u></u><u></u></span></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="font-size:9pt;color:rgb(31,73,125)">Kontor: <a href="tel:%2B46%20%280%298%20633%2066%2000" value="+4686336600" target="_blank">+46 (0)8 633 66 00</a>/26</span></p>
<p class="MsoNormal" style="font-family:Calibri,sans-serif;margin:0cm 0cm 0.0001pt;font-size:11pt">
<span style="font-size:9pt;color:rgb(31,73,125)"><a href="mailto:jan.finnerman@load.se" target="_blank">jan.finnerman@load.se</a></span></p>
</div>
</div>
</div>
</div>

<br>_______________________________________________<br>
gpfsug-discuss mailing list<br>
gpfsug-discuss at <a href="http://spectrumscale.org" rel="noreferrer" target="_blank">spectrumscale.org</a><br>
<a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" rel="noreferrer" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a><br>
<br></blockquote></div><br></div>