<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns:mv="http://macVmlSchemaUri" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Title" content="">
<meta name="Keywords" content="">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:"Courier New";
        panose-1:2 7 3 9 2 2 5 2 4 4;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:sans-serif;
        panose-1:0 0 0 0 0 0 0 0 0 0;}
@font-face
        {font-family:Cambria;
        panose-1:2 4 5 3 5 4 6 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p
        {mso-style-priority:99;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman";}
tt
        {mso-style-priority:99;
        font-family:"Courier New";}
span.EmailStyle19
        {mso-style-type:personal-reply;
        font-family:Calibri;
        color:windowtext;}
span.msoIns
        {mso-style-type:export-only;
        mso-style-name:"";
        text-decoration:underline;
        color:teal;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style>
</head>
<body bgcolor="white" lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri">Well said Marc.  I think in IBM’s marketing pitches they make it sound so simple and easy.  But this doesn’t take the place of well planned, tested, and properly sized implementations.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:Calibri"><o:p> </o:p></span></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-family:Calibri;color:black">From: </span>
</b><span style="font-family:Calibri;color:black"><gpfsug-discuss-bounces@spectrumscale.org> on behalf of Marc A Kaplan <makaplan@us.ibm.com><br>
<b>Reply-To: </b>gpfsug main discussion list <gpfsug-discuss@spectrumscale.org><br>
<b>Date: </b>Thursday, July 21, 2016 at 8:33 AM<br>
<b>To: </b>gpfsug main discussion list <gpfsug-discuss@spectrumscale.org><br>
<b>Subject: </b>Re: [gpfsug-discuss] NDS in Two Site scenario<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"sans-serif","serif"">I don't know.  That said, let's be logical and cautious.
</span><br>
<br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Your network performance has got to be comparable to (preferably better than!)  your disk/storage system.  </span><br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Think speed, latency, bandwidth, jitter, reliability, security.</span><br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">For a production system with data you care about, that probably means a dedicated/private/reserved channel, probably on private or leased fiber.</span><br>
<br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Sure you can cobble together a demo, proof-of-concept, or prototype with less than that, but are you going to bet your career, life, friendships, data on that?</span><br>
<br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Then you have to work through and test failure and recover scenarios...</span><br>
<br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">This forum would be one place to gather at least some anecdotes from power users/admins who might be running GPFS clusters spread over</span><br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">multiple kilometers...  </span><br>
<br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Is there a sale or marketing team selling this?  What do they recommend?</span><br>
<br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Here is an excerpt from an IBM white paper I found by googling...  Notice the qualifier "high quality wide area network":</span><br>
<br>
"...Synchronous replication works well for many workloads by replicating data across storage arrays within a data center, within a campus or across geographical distances using high quality wide area network connections. When wide area network connections are
 not high performance or are not reliable, an asynchronous approach to data replication is required. GPFS 3.5 introduces a feature called Active File Management (AFM).
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">..."<br>
</span><br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Of course GPFS has improved (and been renamed!) since 3.5 but 4.2 cannot magically compensate for a not-so-high-quality network!</span><br>
<br>
<br>
<br>
<br>
<span style="font-size:7.5pt;font-family:"sans-serif","serif";color:#5F5F5F">From:        </span><span style="font-size:7.5pt;font-family:"sans-serif","serif"">"Mark.Bush@siriuscom.com" <Mark.Bush@siriuscom.com></span><br>
<span style="font-size:7.5pt;font-family:"sans-serif","serif";color:#5F5F5F">To:        </span><span style="font-size:7.5pt;font-family:"sans-serif","serif"">gpfsug main discussion list <gpfsug-discuss@spectrumscale.org></span><br>
<span style="font-size:7.5pt;font-family:"sans-serif","serif";color:#5F5F5F">Date:        </span><span style="font-size:7.5pt;font-family:"sans-serif","serif"">07/20/2016 07:34 PM</span><br>
<span style="font-size:7.5pt;font-family:"sans-serif","serif";color:#5F5F5F">Subject:        </span><span style="font-size:7.5pt;font-family:"sans-serif","serif"">Re: [gpfsug-discuss] NDS in Two Site scenario</span><br>
<span style="font-size:7.5pt;font-family:"sans-serif","serif";color:#5F5F5F">Sent by:        </span><span style="font-size:7.5pt;font-family:"sans-serif","serif"">gpfsug-discuss-bounces@spectrumscale.org</span><o:p></o:p></p>
<div class="MsoNormal" align="center" style="text-align:center">
<hr size="2" width="100%" noshade="" style="color:#AAAAAA" align="center">
</div>
<p class="MsoNormal"><br>
<br>
<br>
<span style="font-size:10.0pt;font-family:Calibri">Marc, what you are saying is anything outside a particular data center shouldn’t be part of a cluster?  I’m not sure marketing is in line with this then.  </span><br>
<span style="font-size:10.0pt;font-family:Calibri"> </span><br>
<b><span style="font-family:Calibri">From: </span></b><span style="font-family:Calibri"><gpfsug-discuss-bounces@spectrumscale.org> on behalf of Marc A Kaplan <makaplan@us.ibm.com><b><br>
Reply-To: </b>gpfsug main discussion list <gpfsug-discuss@spectrumscale.org><b><br>
Date: </b>Wednesday, July 20, 2016 at 4:52 PM<b><br>
To: </b>gpfsug main discussion list <gpfsug-discuss@spectrumscale.org><b><br>
Subject: </b>Re: [gpfsug-discuss] NDS in Two Site scenario</span><br>
 <br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif"">Careful! You need to plan and test, test and plan both failure scenarios and performance under high network loads.<br>
I don't believe GPFS was designed with the idea of splitting clusters over multiple sites.  <br>
If your inter-site network runs fast enough, and you can administer it well enough -- perhaps it will work well enough...</span><br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif""><br>
Hint: Think about the what the words "cluster" and "site" mean.</span><br>
<span style="font-size:10.0pt;font-family:"sans-serif","serif""><br>
GPFS does have the AFM feature, which was designed for multi-site deployments.</span><o:p></o:p></p>
<p><span style="font-size:7.5pt;font-family:Cambria">This message (including any attachments) is intended only for the use of the individual or entity to which it is addressed and may contain information that is non-public, proprietary, privileged, confidential,
 and exempt from disclosure under applicable law. If you are not the intended recipient, you are hereby notified that any use, dissemination, distribution, or copying of this communication is strictly prohibited. This message may be viewed by parties at Sirius
 Computer Solutions other than those named in the message header. This message does not contain an official representation of Sirius Computer Solutions. If you have received this communication in error, notify Sirius Computer Solutions immediately and (i) destroy
 this message if a facsimile or (ii) delete this message immediately if this is an electronic communication. Thank you.
</span><o:p></o:p></p>
<p><a href="http://www.siriuscom.com/"><b><span style="font-size:10.0pt;font-family:Calibri;color:#0082BF">Sirius Computer Solutions</span></b></a>
<tt><span style="font-size:10.0pt">_______________________________________________</span></tt><span style="font-size:10.0pt;font-family:"Courier New""><br>
<tt>gpfsug-discuss mailing list</tt><br>
<tt>gpfsug-discuss at spectrumscale.org</tt><br>
</span><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss"><tt><span style="font-size:10.0pt">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</span></tt></a><o:p></o:p></p>
<p><o:p> </o:p></p>
</div>
</div>
</div>
</body>
</html>