<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns:mv="http://macVmlSchemaUri" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Title" content="">
<meta name="Keywords" content="">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:Arial;
        panose-1:2 11 6 4 2 2 2 2 2 4;}
@font-face
        {font-family:"Courier New";
        panose-1:2 7 3 9 2 2 5 2 4 4;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Cambria;
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:MingLiU;
        panose-1:2 2 5 9 0 0 0 0 0 0;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p
        {mso-style-priority:99;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman";}
tt
        {mso-style-priority:99;
        font-family:"Courier New";}
span.EmailStyle19
        {mso-style-type:personal;
        font-family:Calibri;
        color:windowtext;}
span.EmailStyle20
        {mso-style-type:personal-reply;
        font-family:Calibri;
        color:windowtext;}
span.msoIns
        {mso-style-type:export-only;
        mso-style-name:"";
        text-decoration:underline;
        color:teal;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style>
</head>
<body bgcolor="white" lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri">Thanks Vic&Simon, I’m totally cool with “it depends” the solution guidance is to achieve a Highly Available FS.  And there is Dark Fibre between the two locations.  FileNet is the application
 and they want two things.  Ability to write in both locations (maybe close to at the same time not necessarily the same files though) and protect against any site failure.  So in my mind my Scenario 1 would work as long as I had copies=2 and restripe are acceptable. 
 Is my Scenario 2 I would still have to restripe if the SAN in site 1 went down.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri">I’m looking for the simplest approach that provides the greatest availability.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri"><o:p> </o:p></span></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-family:Calibri;color:black">From: </span>
</b><span style="font-family:Calibri;color:black"><gpfsug-discuss-bounces@spectrumscale.org> on behalf of "Simon Thompson (Research Computing - IT Services)" <S.J.Thompson@bham.ac.uk><br>
<b>Reply-To: </b>gpfsug main discussion list <gpfsug-discuss@spectrumscale.org><br>
<b>Date: </b>Thursday, July 21, 2016 at 8:02 AM<br>
<b>To: </b>gpfsug main discussion list <gpfsug-discuss@spectrumscale.org><br>
<b>Subject: </b>Re: [gpfsug-discuss] NDS in Two Site scenario<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black">It depends.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black">What are you protecting against?<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black">Either will work depending on your acceptable failure modes. I'm assuming here that you are using copies=2 to replicate the data, and that the NSD devices have different failure
 groups per site.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black">In the second example, if you were to lose the NSD servers in Site 1, but not the SAN, you would continue to have 2 copies of data written as the NSD servers in Site 2 could
 write to the SAN in Site 1.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black">In the first example you would need to rest ripe the file-system when brining the Site 1 back online to ensure data is replicated.\<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black">Simon<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black"><o:p> </o:p></span></p>
</div>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:Calibri;color:black">From:
</span></b><span style="font-size:11.0pt;font-family:Calibri;color:black"><<a href="mailto:gpfsug-discuss-bounces@spectrumscale.org">gpfsug-discuss-bounces@spectrumscale.org</a>> on behalf of "<a href="mailto:Mark.Bush@siriuscom.com">Mark.Bush@siriuscom.com</a>"
 <<a href="mailto:Mark.Bush@siriuscom.com">Mark.Bush@siriuscom.com</a>><br>
<b>Reply-To: </b>"<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>" <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>><br>
<b>Date: </b>Thursday, 21 July 2016 at 13:45<br>
<b>To: </b>"<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>" <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>><br>
<b>Subject: </b>Re: [gpfsug-discuss] NDS in Two Site scenario<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Calibri;color:black"><o:p> </o:p></span></p>
</div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">This is where my confusion sits.  So if I have two sites, and two NDS Nodes per site with 1 NSD (to keep it simple), do I just present the physical LUN in Site1 to Site1 NDS
 Nodes and physical LUN in Site2 to Site2 NSD Nodes?  Or is it that I present physical LUN in Site1 to all 4 NDS Nodes and the same at Site2?  (Assuming SAN and not direct attached in this case).  I know I’m being persistent but this for some reason confuses
 me.  </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">Site1</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node1</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">                                ---NSD1 ---Physical LUN1 from SAN1
</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node2</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">Site2</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node3          
</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal" style="margin-left:.5in;text-indent:.5in"><span style="font-size:11.0pt;font-family:Calibri;color:black">---NSD2 –Physical LUN2 from SAN2</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node4</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">Or
</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">Site1</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node1</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">                                ----NSD1 –Physical LUN1 from SAN1</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">                               ----NSD2 –Physical LUN2 from SAN2</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node2</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">Site 2</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node3          
</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">                                ---NSD2 – Physical LUN2 from SAN2</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">                                ---NSD1  --Physical LUN1 from SAN1</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">NSD Node4</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">Site 3</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black">Node5 Quorum</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><o:p></o:p></span></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-family:Calibri;color:black">From: </span>
</b><span style="font-family:Calibri;color:black"><<a href="mailto:gpfsug-discuss-bounces@spectrumscale.org">gpfsug-discuss-bounces@spectrumscale.org</a>> on behalf of Ken Hill <<a href="mailto:kenh@us.ibm.com">kenh@us.ibm.com</a>><br>
<b>Reply-To: </b>gpfsug main discussion list <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>><br>
<b>Date: </b>Wednesday, July 20, 2016 at 7:02 PM<br>
<b>To: </b>gpfsug main discussion list <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>><br>
<b>Subject: </b>Re: [gpfsug-discuss] NDS in Two Site scenario</span><span style="color:black"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="color:black"> <o:p></o:p></span></p>
</div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:Helvetica;color:black">Yes - it is a cluster.</span><span style="color:black"><br>
<br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black">The sites should NOT be further than a MAN - or Campus network. If you're looking to do this over a large distance - it would be best to choose another GPFS solution (Multi-Cluster, AFM,
 etc).</span><span style="color:black"><br>
<br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black">Regards,</span><span style="color:black"><br>
<br>
</span><b><span style="font-family:Arial;color:#8F8F8F">Ken Hill</span></b><span style="font-size:10.0pt;font-family:Arial;color:black"><br>
Technical Sales Specialist | Software Defined Solution Sales<br>
IBM Systems</span><span style="color:black"> <o:p></o:p></span></p>
<table class="MsoNormalTable" border="0" cellspacing="0" cellpadding="0" width="776" style="width:582.0pt;border-collapse:collapse">
<tbody>
<tr style="height:6.0pt">
<td width="776" colspan="3" style="width:582.0pt;padding:0in 0in 0in 0in;height:6.0pt">
<div class="MsoNormal" align="center" style="text-align:center">
<hr size="2" width="100%" align="center">
</div>
</td>
</tr>
<tr style="height:6.0pt">
<td width="159" style="width:119.25pt;padding:0in 0in 0in 0in;height:6.0pt">
<p class="MsoNormal"><b><span style="font-size:7.5pt;font-family:Arial;color:#4181C0">Phone:</span></b><span style="font-size:7.5pt;font-family:Arial">1-540-207-7270<b><span style="color:#4181C0"><br>
E-mail:</span></b></span><span style="font-family:Arial"> </span><a href="mailto:kenh@us.ibm.com" target="_blank"><span style="font-size:7.5pt;font-family:Arial;color:#5F5F5F">kenh@us.ibm.com</span></a><o:p></o:p></p>
</td>
<td width="616" style="width:462.0pt;padding:0in 0in 0in 0in;height:6.0pt">
<p class="MsoNormal" align="right" style="text-align:right"><a href="http://www.ibm.com/us-en/"><span style="text-decoration:none"><img border="0" width="74" height="30" id="_x0000_i1026" src="cid:image001.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/platformcomputing/products/lsf/"><span style="text-decoration:none"><img border="0" width="31" height="30" id="_x0000_i1027" src="cid:image002.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/platformcomputing/products/high-performance-services/index.html">
<span style="text-decoration:none"><img border="0" width="28" height="30" id="_x0000_i1028" src="cid:image003.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/platformcomputing/products/symphony/index.html">
<span style="text-decoration:none"><img border="0" width="29" height="30" id="_x0000_i1029" src="cid:image004.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/spectrum/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1030" src="cid:image005.png@01D1E327.B037C650"></span></a> 
<a href="http://www-01.ibm.com/software/tivoli/csi/cloud-storage/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1031" src="cid:image006.png@01D1E327.B037C650"></span></a> 
<a href="http://www-01.ibm.com/software/tivoli/csi/backup-recovery/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1032" src="cid:image007.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/tape/ltfs/index.html"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1033" src="cid:image008.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/spectrum/"><span style="text-decoration:none"><img border="0" width="27" height="30" id="_x0000_i1034" src="cid:image009.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/spectrum/scale/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1035" src="cid:image010.png@01D1E327.B037C650"></span></a> 
<a href="https://www.ibm.com/marketplace/cloud/object-storage/us/en-us"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1036" src="cid:image011.png@01D1E327.B037C650"></span></a> 
<br>
<span style="font-size:7.5pt;font-family:Arial"><br>
2300 Dulles Station Blvd<br>
Herndon, VA 20171-6133<br>
United States</span><o:p></o:p></p>
</td>
<td width="6" valign="top" style="width:4.5pt;padding:0in 0in 0in 0in;height:6.0pt">
</td>
</tr>
</tbody>
</table>
<p><span style="color:black"><br>
<br>
<br>
<br>
<br>
<br>
</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F">From:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">"<a href="mailto:Mark.Bush@siriuscom.com">Mark.Bush@siriuscom.com</a>" <<a href="mailto:Mark.Bush@siriuscom.com">Mark.Bush@siriuscom.com</a>></span><span style="color:black"><br>
</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F">To:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">gpfsug main discussion list <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>></span><span style="color:black"><br>
</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F">Date:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">07/20/2016 07:33 PM</span><span style="color:black"><br>
</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F">Subject:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">Re: [gpfsug-discuss] NDS in Two Site scenario</span><span style="color:black"><br>
</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F">Sent by:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black"><a href="mailto:gpfsug-discuss-bounces@spectrumscale.org">gpfsug-discuss-bounces@spectrumscale.org</a></span><span style="color:black"><o:p></o:p></span></p>
<div class="MsoNormal" align="center" style="text-align:center"><span style="color:black">
<hr size="2" width="100%" noshade="" style="color:#AAAAAA" align="center">
</span></div>
<p class="MsoNormal"><span style="color:black"><br>
<br>
<br>
</span><span style="font-size:10.0pt;font-family:Calibri;color:black">So in this scenario Ken, can server3 see any disks in site1?  </span><span style="color:black"><br>
</span><span style="font-size:10.0pt;font-family:Calibri;color:black"> </span><span style="color:black"><br>
</span><b><span style="font-family:Calibri;color:black">From: </span></b><span style="font-family:Calibri;color:black"><<a href="mailto:gpfsug-discuss-bounces@spectrumscale.org">gpfsug-discuss-bounces@spectrumscale.org</a>> on behalf of Ken Hill <<a href="mailto:kenh@us.ibm.com">kenh@us.ibm.com</a>><b><br>
Reply-To: </b>gpfsug main discussion list <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>><b><br>
Date: </b>Wednesday, July 20, 2016 at 4:15 PM<b><br>
To: </b>gpfsug main discussion list <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>><b><br>
Subject: </b>Re: [gpfsug-discuss] NDS in Two Site scenario</span><span style="color:black"><br>
 <br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black"><br>
                                 Site1                                            Site2<br>
                                 Server1 (quorum 1)                      Server3 (quorum 2)<br>
                                 Server2                                       Server4</span><span style="color:black"><br>
<br>
<br>
<br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black"><br>
                                 SiteX <br>
                                 Server5 (quorum 3)</span><span style="color:black"><br>
<br>
<br>
<br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black"><br>
You need to set up another site (or server) that is at least power isolated (if not completely infrastructure isolated) from Site1 or Site2. You would then set up a quorum node at that site | location. This insures you can still access your data even if one
 of your sites go down.</span><span style="color:black"><br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black"><br>
You can further isolate failure by increasing quorum (odd numbers).</span><span style="color:black"><br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black"><br>
The way quorum works is: The majority of the quorum nodes need to be up to survive an outage.<br>
<br>
- With 3 quorum nodes you can have 1 quorum node failures and continue filesystem operations.<br>
- With 5 quorum nodes you can have 2 quorum node failures and continue filesystem operations.<br>
- With 7 quorum nodes you can have 3 quorum node failures and continue filesystem operations.<br>
- etc</span><span style="color:black"><br>
</span><span style="font-size:10.0pt;font-family:Helvetica;color:black"><br>
Please see </span><span style="color:black"><a href="http://www.ibm.com/support/knowledgecenter/en/STXKQY_4.2.0/ibmspectrumscale42_content.html?view=kc"><span style="font-size:10.0pt;font-family:Helvetica">http://www.ibm.com/support/knowledgecenter/en/STXKQY_4.2.0/ibmspectrumscale42_content.html?view=kc</span></a></span><span style="font-size:10.0pt;font-family:Helvetica;color:black">for
 more information about quorum and tiebreaker disks.</span><span style="color:black"><br>
</span><b><span style="font-family:Arial;color:#8F8F8F"><br>
Ken Hill</span></b><span style="font-size:10.0pt;font-family:Arial;color:black"><br>
Technical Sales Specialist | Software Defined Solution Sales<br>
IBM Systems</span><span style="color:black"> <o:p></o:p></span></p>
<table class="MsoNormalTable" border="0" cellspacing="0" cellpadding="0" width="775" style="width:581.25pt;border-collapse:collapse">
<tbody>
<tr style="height:6.0pt">
<td width="775" colspan="3" style="width:581.25pt;padding:0in 0in 0in 0in;height:6.0pt">
<div class="MsoNormal" align="center" style="text-align:center">
<hr size="2" width="100%" align="center">
</div>
</td>
</tr>
<tr style="height:6.0pt">
<td width="158" style="width:118.5pt;padding:0in 0in 0in 0in;height:6.0pt">
<p class="MsoNormal"><b><span style="font-size:7.5pt;font-family:Arial;color:#4181C0">Phone:</span></b><span style="font-size:7.5pt;font-family:Arial">1-540-207-7270<b><span style="color:#4181C0"><br>
E-mail:</span></b></span><span style="font-family:Arial"> </span><a href="mailto:kenh@us.ibm.com" target="_blank"><span style="font-size:7.5pt;font-family:Arial;color:#5F5F5F">kenh@us.ibm.com</span></a><o:p></o:p></p>
</td>
<td width="611" style="width:458.25pt;padding:0in 0in 0in 0in;height:6.0pt">
<p class="MsoNormal" align="right" style="text-align:right"><a href="http://www.ibm.com/us-en/"><span style="text-decoration:none"><img border="0" width="74" height="30" id="_x0000_i1039" src="cid:image012.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/platformcomputing/products/lsf/"><span style="text-decoration:none"><img border="0" width="31" height="30" id="_x0000_i1040" src="cid:image013.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/platformcomputing/products/high-performance-services/index.html">
<span style="text-decoration:none"><img border="0" width="28" height="30" id="_x0000_i1041" src="cid:image014.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/platformcomputing/products/symphony/index.html">
<span style="text-decoration:none"><img border="0" width="29" height="30" id="_x0000_i1042" src="cid:image015.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/spectrum/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1043" src="cid:image016.png@01D1E327.B037C650"></span></a> 
<a href="http://www-01.ibm.com/software/tivoli/csi/cloud-storage/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1044" src="cid:image017.png@01D1E327.B037C650"></span></a> 
<a href="http://www-01.ibm.com/software/tivoli/csi/backup-recovery/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1045" src="cid:image018.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/tape/ltfs/index.html"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1046" src="cid:image019.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/spectrum/"><span style="text-decoration:none"><img border="0" width="27" height="30" id="_x0000_i1047" src="cid:image020.png@01D1E327.B037C650"></span></a> 
<a href="http://www-03.ibm.com/systems/storage/spectrum/scale/"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1048" src="cid:image021.png@01D1E327.B037C650"></span></a> 
<a href="https://www.ibm.com/marketplace/cloud/object-storage/us/en-us"><span style="text-decoration:none"><img border="0" width="26" height="30" id="_x0000_i1049" src="cid:image022.png@01D1E327.B037C650"></span></a> 
<span style="font-size:7.5pt;font-family:Arial"><br>
<br>
2300 Dulles Station Blvd<br>
Herndon, VA 20171-6133<br>
United States</span><o:p></o:p></p>
</td>
<td width="6" valign="top" style="width:4.5pt;padding:0in 0in 0in 0in;height:6.0pt">
</td>
</tr>
</tbody>
</table>
<p><span style="color:black"><br>
<br>
<br>
<br>
<br>
</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F"><br>
From:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">"<a href="mailto:Mark.Bush@siriuscom.com">Mark.Bush@siriuscom.com</a>" <<a href="mailto:Mark.Bush@siriuscom.com">Mark.Bush@siriuscom.com</a>></span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F"><br>
To:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">gpfsug main discussion list <<a href="mailto:gpfsug-discuss@spectrumscale.org">gpfsug-discuss@spectrumscale.org</a>></span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F"><br>
Date:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">07/20/2016 04:47 PM</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F"><br>
Subject:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black">[gpfsug-discuss] NDS in Two Site scenario</span><span style="font-size:7.5pt;font-family:Helvetica;color:#5F5F5F"><br>
Sent by:        </span><span style="font-size:7.5pt;font-family:Helvetica;color:black"><a href="mailto:gpfsug-discuss-bounces@spectrumscale.org">gpfsug-discuss-bounces@spectrumscale.org</a></span><span style="color:black"><o:p></o:p></span></p>
<div class="MsoNormal" align="center" style="text-align:center"><span style="color:black">
<hr size="2" width="100%" noshade="" style="color:#AAAAAA" align="center">
</span></div>
<p class="MsoNormal"><span style="color:black"><br>
<br>
<br>
</span><span style="font-size:10.0pt;font-family:Calibri;color:black"><br>
For some reason this concept is a round peg that doesn’t fit the square hole inside my brain.  Can someone please explain the best practice to setting up two sites same cluster?  I get that I would likely have two NDS nodes in site 1 and two NDS nodes in site
 two.  What I don’t understand are the failure scenarios and what would happen if I lose one or worse a whole site goes down.  Do I solve this by having scale replication set to 2 for all my files?  I mean a single site I think I get it’s when there are two
 datacenters and I don’t want two clusters typically.</span><span style="font-size:10.0pt;font-family:MingLiU;color:black"><br>
<br>
<br>
</span><span style="font-size:10.0pt;font-family:Calibri;color:#002F80"><br>
Mark R. Bush</span><span style="font-size:10.0pt;font-family:Calibri;color:black">| Solutions Architect<br>
Mobile: 210.237.8415 | <a href="mailto:mark.bush@siriuscom.com">mark.bush@siriuscom.com</a><br>
Sirius Computer Solutions | </span><span style="color:black"><a href="http://www.siriuscom.com/"><span style="font-size:10.0pt;font-family:Calibri">www.siriuscom.com</span></a></span><span style="font-size:10.0pt;font-family:Calibri;color:black"><br>
10100 Reunion Place, Suite 500, San Antonio, TX 78216 </span><span style="font-family:Calibri;color:black"><br>
</span><span style="color:black">  <o:p></o:p></span></p>
<p><span style="font-size:7.5pt;font-family:Cambria;color:black">This message (including any attachments) is intended only for the use of the individual or entity to which it is addressed and may contain information that is non-public, proprietary, privileged,
 confidential, and exempt from disclosure under applicable law. If you are not the intended recipient, you are hereby notified that any use, dissemination, distribution, or copying of this communication is strictly prohibited. This message may be viewed by
 parties at Sirius Computer Solutions other than those named in the message header. This message does not contain an official representation of Sirius Computer Solutions. If you have received this communication in error, notify Sirius Computer Solutions immediately
 and (i) destroy this message if a facsimile or (ii) delete this message immediately if this is an electronic communication. Thank you.
</span><span style="color:black"><o:p></o:p></span></p>
<p><span style="color:black"><a href="http://www.siriuscom.com/"><b><span style="font-size:10.0pt;font-family:Calibri;color:#0082BF">Sirius Computer Solutions</span></b></a></span><span style="font-size:10.0pt;font-family:"Courier New";color:black">_______________________________________________<br>
gpfsug-discuss mailing list<br>
gpfsug-discuss at spectrumscale.org</span><u><span style="color:blue"><br>
</span></u><span style="color:black"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss"><span style="font-size:10.0pt;font-family:"Courier New"">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</span></a><o:p></o:p></span></p>
<p><span style="color:black"> </span><tt><span style="font-size:10.0pt;color:black">_______________________________________________</span></tt><span style="font-size:10.0pt;font-family:"Courier New";color:black"><br>
<tt>gpfsug-discuss mailing list</tt><br>
<tt>gpfsug-discuss at spectrumscale.org</tt><br>
</span><span style="color:black"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss"><tt><span style="font-size:10.0pt">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</span></tt></a><o:p></o:p></span></p>
<p><span style="color:black"> <o:p></o:p></span></p>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</body>
</html>