<font size=2 face="sans-serif">Simon,</font><br><br><font size=2 face="sans-serif">I believe that adaptive routing might

also introduce out of order packets - but I would ask Mellanox as to when

they recommend to use it.</font><br><font size=2 face="sans-serif"><br>Regards,<br><br>Tomer Perry<br>Scalable I/O Development (Spectrum Scale)<br>email: tomp@il.ibm.com<br>1 Azrieli Center, Tel Aviv 67021, Israel<br>Global Tel:    +1 720 3422758<br>Israel Tel:      +972 3 9188625<br>Mobile:         +972 52 2554625<br></font><br><br><br><br><font size=1 color=#5f5f5f face="sans-serif">From:      

 </font><font size=1 face="sans-serif">Simon Thompson <S.J.Thompson@bham.ac.uk></font><br><font size=1 color=#5f5f5f face="sans-serif">To:      

 </font><font size=1 face="sans-serif">gpfsug main discussion

list <gpfsug-discuss@spectrumscale.org></font><br><font size=1 color=#5f5f5f face="sans-serif">Date:      

 </font><font size=1 face="sans-serif">03/10/2019 12:14</font><br><font size=1 color=#5f5f5f face="sans-serif">Subject:    

   </font><font size=1 face="sans-serif">[EXTERNAL] Re:

[gpfsug-discuss] verbsPortsOutOfOrder</font><br><font size=1 color=#5f5f5f face="sans-serif">Sent by:    

   </font><font size=1 face="sans-serif">gpfsug-discuss-bounces@spectrumscale.org</font><br><hr noshade><br><br><br><font size=2 face="Calibri">Thanks Tomer.</font><br><font size=2 face="Calibri"> </font><br><font size=2 face="Calibri">That makes sense, also not something I

think we need to worry about – I assume that relates to hypercube or dragonfly

or some such though the Mellanox docs only say “some topologies”</font><br><font size=2 face="Calibri"> </font><br><font size=2 face="Calibri">Simon</font><br><font size=2 face="Calibri"> </font><br><font size=3 face="Calibri"><b>From: </b><gpfsug-discuss-bounces@spectrumscale.org>

on behalf of "TOMP@il.ibm.com" <TOMP@il.ibm.com><b><br>Reply-To: </b>"gpfsug-discuss@spectrumscale.org" <gpfsug-discuss@spectrumscale.org><b><br>Date: </b>Wednesday, 2 October 2019 at 11:54<b><br>To: </b>"gpfsug-discuss@spectrumscale.org" <gpfsug-discuss@spectrumscale.org><b><br>Subject: </b>Re: [gpfsug-discuss] verbsPortsOutOfOrder</font><br><font size=2 face="Calibri"> </font><br><font size=2 face="Arial">Simon,</font><font size=2 face="Calibri"><br></font><font size=2 face="Arial"><br>It looks like its setting the Out Of Order MLX5 environmental parameter:</font><font size=2 color=blue face="Calibri"><u><br></u></font><a href="https://docs.mellanox.com/display/MLNXOFEDv451010/Out-of-Order+%28OOO%29+Data+Placement+Experimental+Verbs"><font size=3 color=blue face="Calibri"><u>https://docs.mellanox.com/display/MLNXOFEDv451010/Out-of-Order+%28OOO%29+Data+Placement+Experimental+Verbs</u></font></a><font size=2 face="Calibri"><br><br></font><font size=2 face="Arial"><br><br>Regards,<br><br>Tomer Perry<br>Scalable I/O Development (Spectrum Scale)<br>email: tomp@il.ibm.com<br>1 Azrieli Center, Tel Aviv 67021, Israel<br>Global Tel:    +1 720 3422758<br>Israel Tel:      +972 3 9188625<br>Mobile:         +972 52 2554625</font><font size=2 face="Calibri"><br><br><br><br></font><font size=1 color=#5f5f5f face="Arial"><br>From:        </font><font size=1 face="Arial">Simon

Thompson <S.J.Thompson@bham.ac.uk></font><font size=1 color=#5f5f5f face="Arial"><br>To:        </font><font size=1 face="Arial">"gpfsug-discuss@spectrumscale.org"

<gpfsug-discuss@spectrumscale.org></font><font size=1 color=#5f5f5f face="Arial"><br>Date:        </font><font size=1 face="Arial">01/10/2019

18:17</font><font size=1 color=#5f5f5f face="Arial"><br>Subject:        </font><font size=1 face="Arial">[EXTERNAL]

[gpfsug-discuss] verbsPortsOutOfOrder<font size=1 color=#5f5f5f face="Arial"> Sent by:        <font size=1 face="Arial">gpfsug-discuss-bounces@spectrumscale.org<div align=center><hr noshade></div> <font size=2 face="Calibri"> <font size=2 face="Calibri"> Hi,   In mmdiag --config, we see “verbsPortsOutOfOrder” as an unset option.

Could anyone comment on what that might do and if it relates to the ordering

that “verbsPorts” are set?<br> <br>Thanks<br> <br>Simon</font><font size=2 face="Courier New">_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at spectrumscale.org</font><font size=2 color=blue face="Calibri"><u><br></u></font><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss"><font size=2 color=blue face="Courier New"><u>http://gpfsug.org/mailman/listinfo/gpfsug-discuss</u></font></a><font size=2 face="Calibri"><br><br><br><br></font><tt><font size=2>_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at spectrumscale.org<br></font></tt><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss"><tt><font size=2>http://gpfsug.org/mailman/listinfo/gpfsug-discuss</font></tt></a><tt><font size=2><br></font></tt><br><br><BR>