<div dir="ltr"><div>Hi,</div><div><br></div><div>If you want to disable fdr10, there is fdr10 option in opensm.conf which should be set to 0:</div><div><br></div><div># FDR10 on ports on devices that support FDR10<br># Values are:<br>#    0: don't use fdr10 (no MLNX ExtendedPortInfo MADs)<br>#    Default 1: enable fdr10 when supported<br>#    2: disable fdr10 when supported<br>fdr10 0<br></div><div><br></div><div>You may need to bounce the links which are at fdr10 but the link would've come up at FDR over FDR10 if that negotiation was successful so I don't think changing fdr10 option will have an effect. Are your cables good for FDR ?</div><div><br></div><div>I have no idea what is causing bad Qkey traps to the SM in your configuration.</div><div><br></div><div>-- Hal<br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Mon, Jun 5, 2017 at 10:15 AM, Michael Di Domenico <span dir="ltr"><<a href="mailto:mdidomenico4@gmail.com" target="_blank">mdidomenico4@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">i'm having trouble getting a fabric tuned up, and i've not done IB<br>
tuning in many years<br>
<br>
assume we're starting with a default opensm and no partitions.conf file<br>
<br>
host hca's are mellanox connectx-3 qdr<br>
storage hca's are mellanox connectx-4 fdr<br>
single fat core switch (no edges), mellanox fdr<br>
<br>
what would be the ideal knobs to turn in opensm and partitions.conf to<br>
get the fabric up full speed.<br>
<br>
currently, i'm not able to get the connectx-4 fdr cards to switch from<br>
FDR10 to FDR mode and when the nodes register it's throwing "Bad_QKey"<br>
errors in the opensm logs.  ibstat, shows "Rate: 40 (FDR10)"<br>
<br>
yes, i know this is a bit of a loaded question...<br>
______________________________<wbr>_________________<br>
Users mailing list<br>
<a href="mailto:Users@lists.openfabrics.org">Users@lists.openfabrics.org</a><br>
<a href="http://lists.openfabrics.org/mailman/listinfo/users" target="_blank" rel="noreferrer">http://lists.openfabrics.org/<wbr>mailman/listinfo/users</a><br>
</blockquote></div><br></div>