<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:p="urn:schemas-microsoft-com:office:powerpoint" xmlns:oa="urn:schemas-microsoft-com:office:activation" xmlns="http://www.w3.org/TR/REC-html40">

<head>
<meta http-equiv=Content-Type content="text/html; charset=us-ascii">
<meta name=Generator content="Microsoft Word 11 (filtered medium)">
<style>
<!--
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman";}
a:link, span.MsoHyperlink
        {color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal;
        font-family:Arial;
        color:windowtext;}
span.EmailStyle18
        {mso-style-type:personal-reply;
        font-family:Arial;
        color:navy;}
@page Section1
        {size:8.5in 11.0in;
        margin:1.0in 1.25in 1.0in 1.25in;}
div.Section1
        {page:Section1;}
-->
</style>

</head>

<body lang=EN-US link=blue vlink=purple>

<div class=Section1>

<p class=MsoNormal style='background:white'><font size=3 face="Times New Roman"><span
style='font-size:12.0pt'>Hi All,<o:p></o:p></span></font></p>

<p class=MsoNormal style='background:white'><font size=3 face="Times New Roman"><span
style='font-size:12.0pt'> <o:p></o:p></span></font></p>

<p class=MsoNormal style='background:white'><font size=3 face="Times New Roman"><span
style='font-size:12.0pt'>We have found something that seems like Infiniband
Spec hole,<o:p></o:p></span></font></p>

<p class=MsoNormal style='background:white'><font size=3 face="Times New Roman"><span
style='font-size:12.0pt'>This issue is system issue that prevents from
partial P_Key setup to<br>
go into production.<br>
<br>
<br>
Short Setup & test description:<br>
------------------------------------------<br>
* Node A: P_Key XXX (full member)<br>
* Node B, C, D, E, F: P_Key XXx (partial member)<br>
<br>
1. Send ping from B -> A : ping is OK<br>
2. Send ping from C -> A : ping is OK<br>
3. Send ping from B -> C  : no ping also OK<br>
* Get traps Bad P_Key in SM - from all HCA in the fabric both for<br>
test 1 & 2 (one time) and also for test 3 (all the time).<br>
<br>
Probably the ARP request that is MC traffic generate the trap in HCA, for
test 1<br>
& 2 we have only one ARP but for test 3 we send ARP all the time because<br>
we do not get any ARP reply.<br>
<br>
* The trap number SM get is 257 (HCA trap) if we will do P_Key<br>
switch enforcement we will probably get 259<br>
.<br>
* We get trap also from the originator of the MC traffic even<br>
though that receive switch relay error counter is increased (when out<br>
port==in port), the switch does not drop the packet ?<br>
<br>
Additional questions/issues:<br>
* Do we have a way to suppress port traps from SMA ?? i.e. that<br>
the port will not generate traps that can "kill the SM" - as its look<br>
this is bug in the spec where we can't send any mc traffic (even ARP)<br>
when we have partial members and we do not have a way to suppress the<br>
traps.<o:p></o:p></span></font></p>

<p class=MsoNormal style='background:white'><font size=3 face="Times New Roman"><span
style='font-size:12.0pt'><br>
* What will happen in the HCA when we get many traps (mc packets<br>
from many nodes) and they need to keep all events until SM will<br>
acknowledge?  - Is there limitation in the number of on-going<br>
traps (any HCA specific issues)?<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'><o:p> </o:p></span></font></p>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'><o:p> </o:p></span></font></p>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>Best Regards <o:p></o:p></span></font></p>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>Olga<o:p></o:p></span></font></p>

</div>

</body>

</html>