<html><head><meta http-equiv="Content-Type" content="text/html charset=utf-8"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">The licensing model was my last point — if the OP uses FPO just to create data resiliency they increase their cost (or curtail their access).<div class=""><br class=""></div><div class="">I was really asking if there was a real, technical positive for using FPO in this example, as I could only come up with equivalences and negatives.<br class=""><div class=""><br class=""></div><div class=""><div class=""><div class="">
-- <br class="">Stephen<br class=""><br class=""><br class="">

</div>
<br class=""><div><blockquote type="cite" class=""><div class="">On Nov 30, 2016, at 10:55 PM, Ken Hill <<a href="mailto:kenh@us.ibm.com" class="">kenh@us.ibm.com</a>> wrote:</div><br class="Apple-interchange-newline"><div class=""><font size="2" face="sans-serif" class="">Hello Stephen,</font><br class=""><br class=""><font size="2" face="sans-serif" class="">There are three licensing models for
Spectrum Scale | GPFS:</font><br class=""><br class=""><font size="2" face="sans-serif" class="">Server</font><br class=""><font size="2" face="sans-serif" class="">FPO</font><br class=""><font size="2" face="sans-serif" class="">Client</font><br class=""><br class=""><font size="2" face="sans-serif" class="">I think the thing you might be missing
is the associated cost per function. </font><br class=""><br class=""><font size="2" face="sans-serif" class="">Regards,</font><br class=""><br class=""><font size="3" color="#8f8f8f" face="Arial" class=""><b class="">Ken Hill</b></font><font size="2" face="Arial" class=""><br class="">Technical Sales Specialist | Software Defined Solution Sales<br class="">IBM Systems</font><p class=""><table width="776" style="border-collapse:collapse;" class=""><tbody class=""><tr height="8" class=""><td width="776" colspan="3" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""><hr class=""></td></tr><tr height="8" class=""><td width="159" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""><font size="1" color="#4181c0" face="Arial" class=""><b class="">Phone:</b></font><font size="3" face="Arial" class=""></font><font size="1" face="Arial" class="">1-540-207-7270</font><font size="1" color="#4181c0" face="Arial" class=""><b class=""><br class="">E-mail:</b></font><font size="3" face="Arial" class=""> </font><a href="mailto:kenh@us.ibm.com" target="_blank" class=""><font size="1" color="#5f5f5f" face="Arial" class=""><u class="">kenh@us.ibm.com</u></font></a></td><td width="616" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""><div align="right" class=""><a href="http://www.ibm.com/us-en/" class=""><span id="cid:_4_C5F22620C5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-03.ibm.com/systems/platformcomputing/products/lsf/" class=""><span id="cid:_4_C5F22A3CC5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-03.ibm.com/systems/platformcomputing/products/high-performance-services/index.html" class=""><span id="cid:_4_C5F22EB4C5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-03.ibm.com/systems/platformcomputing/products/symphony/index.html" class=""><span id="cid:_4_C5F2332CC5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-03.ibm.com/systems/storage/spectrum/" class=""><span id="cid:_4_C5F237A4C5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-01.ibm.com/software/tivoli/csi/cloud-storage/" class=""><span id="cid:_4_C5F23C1CC5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-01.ibm.com/software/tivoli/csi/backup-recovery/" class=""><span id="cid:_4_C5F24094C5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-03.ibm.com/systems/storage/tape/ltfs/index.html" class=""><span id="cid:_4_C5F2450CC5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-03.ibm.com/systems/storage/spectrum/" class=""><span id="cid:_4_C5F24984C5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="http://www-03.ibm.com/systems/storage/spectrum/scale/" class=""><span id="cid:_4_C5F24DFCC5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
</font><a href="https://www.ibm.com/marketplace/cloud/object-storage/us/en-us" class=""><span id="cid:_4_C5F25274C5F220700015917C8525807C"><Mail Attachment.png></span></a><font size="3" class=""> 
<br class=""></font><font size="1" face="Arial" class=""><br class="">2300 Dulles Station Blvd<br class="">Herndon, VA 20171-6133<br class="">United States</font></div></td><td width="6" valign="top" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""></td></tr></tbody></table><br class=""><br class=""><br class=""><br class=""><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">From:      
 </font><font size="1" face="sans-serif" class="">Stephen Ulmer <<a href="mailto:ulmer@ulmer.org" class="">ulmer@ulmer.org</a>></font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">To:      
 </font><font size="1" face="sans-serif" class="">gpfsug main discussion
list <<a href="mailto:gpfsug-discuss@spectrumscale.org" class="">gpfsug-discuss@spectrumscale.org</a>></font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">Date:      
 </font><font size="1" face="sans-serif" class="">11/30/2016 09:46 PM</font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">Subject:    
   </font><font size="1" face="sans-serif" class="">Re: [gpfsug-discuss]
Strategies - servers with local SAS disks</font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">Sent by:    
   </font><font size="1" face="sans-serif" class=""><a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" class="">gpfsug-discuss-bounces@spectrumscale.org</a></font><br class=""></p><hr noshade="" class=""><br class=""><br class=""><br class=""><font size="3" class="">I don’t understand what FPO provides here that mirroring
doesn’t:</font><ul class=""><li class=""><font size="3" class="">You can still use failure domains — one for each node.</font></li><li class=""><font size="3" class="">Both still have redundancy for the data; you can lose
a disk or a node.</font></li><li class=""><font size="3" class="">The data has to be re-striped in the event of a disk failure
— no matter what.</font></li></ul><br class=""><font size="3" class="">Also, the FPO license doesn’t allow for regular clients
to access the data -- only server and FPO nodes.</font><br class=""><br class=""><font size="3" class="">What am I missing?</font><br class=""><br class=""><font size="3" class="">Liberty,</font><br class=""><br class=""><font size="3" class="">-- </font><br class=""><font size="3" class="">Stephen<br class=""><br class=""></font><br class=""><br class=""><font size="3" class="">On Nov 30, 2016, at 3:51 PM, Andrew Beattie <</font><a href="mailto:abeattie@au1.ibm.com" class=""><font size="3" color="blue" class=""><u class="">abeattie@au1.ibm.com</u></font></a><font size="3" class="">>
wrote:</font><br class=""><br class=""><font size="2" face="Arial" class="">Bob,</font><br class=""><font size="2" face="Arial" class=""> </font><br class=""><font size="2" face="Arial" class="">If your not going to use integrated Raid
controllers in the servers, then FPO would seem to be the most resilient
scenario.</font><br class=""><font size="2" face="Arial" class="">yes it has its own overheads, but with that
many drives to manage, a JOBD architecture and manual restriping doesn't
sound like fun</font><br class=""><font size="2" face="Arial" class=""> </font><br class=""><font size="2" face="Arial" class="">If you are going down the path of integrated
raid controllers then any form of distributed raid is probably the best
scenario, Raid 6 obviously.</font><br class=""><font size="2" face="Arial" class=""> </font><br class=""><font size="2" face="Arial" class="">How many Nodes are you planning on building?
 The more nodes the more value FPO is likely to bring as you can be
more specific in how the data is written to the nodes.</font><br class=""><font size="2" face="Arial" class=""> </font><br class=""><font size="3" color="#80803f" face="Arial" class=""><b class="">Andrew Beattie</b></font><br class=""><font size="2" face="Arial" class=""><b class="">Software Defined Storage  - IT Specialist</b></font><br class=""><font size="1" color="#3f8080" face="Arial" class=""><b class="">Phone: </b></font><font size="1" face="Arial" class="">614-2133-7927</font><br class=""><font size="1" color="#3f8080" face="Arial" class=""><b class="">E-mail: </b></font><a href="mailto:abeattie@au1.ibm.com" class=""><font size="1" color="#4f4f4f" face="Arial" class=""><u class="">abeattie@au1.ibm.com</u></font></a><br class=""><font size="2" face="Arial" class=""> </font><br class=""><font size="2" face="Arial" class=""> </font><br class=""><font size="2" face="Arial" class="">----- Original message -----<br class="">From: "Oesterlin, Robert" <</font><a href="mailto:Robert.Oesterlin@nuance.com" class=""><font size="2" color="blue" face="Arial" class=""><u class="">Robert.Oesterlin@nuance.com</u></font></a><font size="2" face="Arial" class="">><br class="">Sent by: </font><a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" class=""><font size="2" color="blue" face="Arial" class=""><u class="">gpfsug-discuss-bounces@spectrumscale.org</u></font></a><font size="2" face="Arial" class=""><br class="">To: gpfsug main discussion list <</font><a href="mailto:gpfsug-discuss@spectrumscale.org" class=""><font size="2" color="blue" face="Arial" class=""><u class="">gpfsug-discuss@spectrumscale.org</u></font></a><font size="2" face="Arial" class="">><br class="">Cc:<br class="">Subject: [gpfsug-discuss] Strategies - servers with local SAS disks<br class="">Date: Thu, Dec 1, 2016 12:34 AM<br class=""> </font><p class=""><font size="2" face="Arial" class="">Looking for feedback/strategies in setting
up several GPFS servers with local SAS. They would all be part of the same
file system. The systems are all similar in configuration - 70 4TB drives.
</font></p><div class=""><font size="2" face="Arial" class=""> </font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">Options I’m considering:</font></p><div class=""><font size="2" face="Arial" class=""> </font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">- Create RAID arrays of the disks on each
server (worried about the RAID rebuild time when a drive fails with 4,
6, 8TB drives)</font></p><p class=""><font size="2" face="Arial" class="">- No RAID with 2 replicas, single drive per
NSD. When a drive fails, recreate the NSD – but then I need to fix up
the data replication via restripe</font></p><p class=""><font size="2" face="Arial" class="">- FPO – with multiple failure groups -  letting
the system manage replica placement and then have GPFS due the restripe
on disk failure automatically</font></p><div class=""><font size="2" face="Arial" class=""> </font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">Comments or other ideas welcome.</font></p><div class=""><font size="2" face="Arial" class=""> </font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">Bob Oesterlin<br class="">Sr Principal Storage Engineer, Nuance<br class="">507-269-0413</font></p><div class=""><font size="2" face="Times New Roman" class=""> </font><br class="webkit-block-placeholder"></div><div class=""><font size="2" face="Arial" class=""> </font><br class="webkit-block-placeholder"></div><p class=""><tt class=""><font size="2" class="">_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at </font></tt><a href="http://spectrumscale.org/" class=""><tt class=""><font size="2" color="blue" class=""><u class="">spectrumscale.org</u></font></tt></a><tt class=""><font size="2" color="blue" class=""><u class=""><br class=""></u></font></tt><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank" class=""><tt class=""><font size="2" color="blue" class=""><u class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</u></font></tt></a><br class=""><font size="2" face="Arial" class=""> </font><br class=""><font size="3" class=""><br class="">_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at </font><a href="http://spectrumscale.org/" class=""><font size="3" color="blue" class=""><u class="">spectrumscale.org</u></font></a><font size="3" color="blue" class=""><u class=""><br class=""></u></font><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" class=""><font size="3" color="blue" class=""><u class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</u></font></a><br class=""><tt class=""><font size="2" class="">_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at <a href="http://spectrumscale.org" class="">spectrumscale.org</a><br class=""></font></tt><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" class=""><tt class=""><font size="2" class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</font></tt></a><tt class=""><font size="2" class=""><br class=""></font></tt><br class=""><br class=""><br class="">
_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at <a href="http://spectrumscale.org" class="">spectrumscale.org</a><br class=""><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a><br class=""></p></div></blockquote></div><br class=""></div></div></div></body></html>