<div dir="ltr">I recently had issues on our Voltaire where IPoIB was not working between sets of nodes, but other sets it worked.  They had no version differences as you described, but the issue turned out to be a bad fabric board in the Voltaire which made all communications from two of the twelve line boards fail to the other ten line boards.  Only communications between hosts on the same line board worked.  I've had hosts using OFED 1.5.3 (EL5 systems) communicate without issue to hosts running the OS provided IB software (EL6).  I at one point had a few systems with Mellanox OFED (latest as of July 2014) communicating without issue to both OFED 1.5.3 and EL6.  In all situations the issues I had were either the subnet manager running on the Voltaire or bad hardware in the Voltaire.<div><br></div><div>- Trey</div></div><div class="gmail_extra"><br clear="all"><div><div class="gmail_signature"><div dir="ltr"><div>=============================</div><div><br></div><div>Trey Dockendorf </div><div>Systems Analyst I </div><div>Texas A&M University </div><div>Academy for Advanced Telecommunications and Learning Technologies </div><div>Phone: (979)458-2396 </div><div>Email: <a href="mailto:treydock@tamu.edu" target="_blank">treydock@tamu.edu</a> </div><div>Jabber: <a href="mailto:treydock@tamu.edu" target="_blank">treydock@tamu.edu</a></div></div></div></div>
<br><div class="gmail_quote">On Sun, Nov 2, 2014 at 3:04 AM, Fedele Stabile <span dir="ltr"><<a href="mailto:fedele.stabile@fis.unical.it" target="_blank">fedele.stabile@fis.unical.it</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div lang="IT" link="#0563C1" vlink="#954F72"><div><p class="MsoNormal">Hello,<u></u><u></u></p><p class="MsoNormal">I want to know if someone has experimented problems in building an etherogeneus cluster that consists of <u></u><u></u></p><p class="MsoNormal">-            A-nodes with Infiniband Mellanox ConnectX card, OFED 1.5.4 software<u></u><u></u></p><p class="MsoNormal">-            B-nodes with Infiniband Intel card, OFED 3.5.2 software<u></u><u></u></p><p class="MsoNormal">-            switch Voltaire<u></u><u></u></p><p class="MsoNormal"> each node in their own group (A-node or B-node) speaks with the other in their group BUT nodes in the A group don’t speak with nodes in the B group and vice-versa.<u></u><u></u></p><p class="MsoNormal"><u></u> <u></u></p><p class="MsoNormal">Can you help me?<u></u><u></u></p><p class="MsoNormal">Thank you in advance,<u></u><u></u></p><p class="MsoNormal">Fedele Stabile <u></u><u></u></p></div></div><br>_______________________________________________<br>
Users mailing list<br>
<a href="mailto:Users@lists.openfabrics.org">Users@lists.openfabrics.org</a><br>
<a href="http://lists.openfabrics.org/mailman/listinfo/users" target="_blank">http://lists.openfabrics.org/mailman/listinfo/users</a><br>
<br></blockquote></div><br></div>