<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.0 Transitional//EN">
<HTML xmlns="http://www.w3.org/TR/REC-html40" xmlns:ex12m = 
"http://schemas.microsoft.com/exchange/services/2006/messages" xmlns:ex12t = 
"http://schemas.microsoft.com/exchange/services/2006/types" xmlns:mrels = 
"http://schemas.openxmlformats.org/package/2006/relationships" xmlns:m = 
"http://schemas.microsoft.com/office/2004/12/omml" xmlns:mver = 
"http://schemas.openxmlformats.org/markup-compatibility/2006" xmlns:wf = 
"http://schemas.microsoft.com/sharepoint/soap/workflow/" xmlns:udcxf = 
"http://schemas.microsoft.com/data/udc/xmlfile" xmlns:xsi = 
"http://www.w3.org/2001/XMLSchema-instance" xmlns:sps = 
"http://schemas.microsoft.com/sharepoint/soap/" xmlns:sp = 
"http://schemas.microsoft.com/sharepoint/" xmlns:ec = 
"http://www.w3.org/2001/04/xmlenc#" xmlns:sub = 
"http://schemas.microsoft.com/sharepoint/soap/2002/1/alerts/" xmlns:xsd = 
"http://www.w3.org/2001/XMLSchema" xmlns:udc = 
"http://schemas.microsoft.com/data/udc" xmlns:dsp = 
"http://schemas.microsoft.com/sharepoint/dsp" xmlns:ds = 
"http://www.w3.org/2000/09/xmldsig#" xmlns:dir = 
"http://schemas.microsoft.com/sharepoint/soap/directory/" xmlns:ois = 
"http://schemas.microsoft.com/sharepoint/soap/ois/" xmlns:x2 = 
"http://schemas.microsoft.com/office/excel/2003/xml" XMLNS:D = "DAV:" xmlns:q = 
"http://schemas.xmlsoap.org/soap/envelope/" xmlns:html = 
"http://www.w3.org/TR/REC-html40" xmlns:oa = 
"urn:schemas-microsoft-com:office:activation" xmlns:c = 
"urn:schemas-microsoft-com:office:component:spreadsheet" xmlns:ss = 
"urn:schemas-microsoft-com:office:spreadsheet" xmlns:b = 
"urn:schemas-microsoft-com:office:publisher" xmlns:z = "#RowsetSchema" xmlns:rs 
= "urn:schemas-microsoft-com:rowset" xmlns:s = 
"uuid:BDC6E3F0-6DA3-11d1-A2A3-00AA00C14882" xmlns:dt = 
"uuid:C2F41010-65B3-11d1-A29F-00AA00C14882" xmlns:a = 
"urn:schemas-microsoft-com:office:access" xmlns:p = 
"urn:schemas-microsoft-com:office:powerpoint" xmlns:x = 
"urn:schemas-microsoft-com:office:excel" xmlns:w = 
"urn:schemas-microsoft-com:office:word" xmlns:o = 
"urn:schemas-microsoft-com:office:office" xmlns:v = 
"urn:schemas-microsoft-com:vml"><HEAD><!--[if !mso]>
<META http-equiv=Content-Type content="text/html; charset=us-ascii">
<STYLE>v\:* {
        BEHAVIOR: url(#default#VML)
}
o\:* {
        BEHAVIOR: url(#default#VML)
}
w\:* {
        BEHAVIOR: url(#default#VML)
}
.shape {
        BEHAVIOR: url(#default#VML)
}
</STYLE>
<![endif]-->
<STYLE>@font-face {
        font-family: Cambria Math;
}
@font-face {
        font-family: Calibri;
}
@font-face {
        font-family: Tahoma;
}
@page Section1 {size: 8.5in 11.0in; margin: 1.0in 1.0in 1.0in 1.0in; }
P.MsoNormal {
        FONT-SIZE: 11pt; MARGIN: 0in 0in 0pt; FONT-FAMILY: "Calibri","sans-serif"
}
LI.MsoNormal {
        FONT-SIZE: 11pt; MARGIN: 0in 0in 0pt; FONT-FAMILY: "Calibri","sans-serif"
}
DIV.MsoNormal {
        FONT-SIZE: 11pt; MARGIN: 0in 0in 0pt; FONT-FAMILY: "Calibri","sans-serif"
}
A:link {
        COLOR: blue; TEXT-DECORATION: underline; mso-style-priority: 99
}
SPAN.MsoHyperlink {
        COLOR: blue; TEXT-DECORATION: underline; mso-style-priority: 99
}
A:visited {
        COLOR: purple; TEXT-DECORATION: underline; mso-style-priority: 99
}
SPAN.MsoHyperlinkFollowed {
        COLOR: purple; TEXT-DECORATION: underline; mso-style-priority: 99
}
SPAN.EmailStyle17 {
        COLOR: windowtext; FONT-FAMILY: "Calibri","sans-serif"; mso-style-type: personal
}
SPAN.EmailStyle18 {
        COLOR: #1f497d; FONT-FAMILY: "Calibri","sans-serif"; mso-style-type: personal-reply
}
.MsoChpDefault {
        FONT-SIZE: 10pt; mso-style-type: export-only
}
DIV.Section1 {
        page: Section1
}
</STYLE>
<!--[if gte mso 9]><xml>
 <o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
 <o:shapelayout v:ext="edit">
  <o:idmap v:ext="edit" data="1" />
 </o:shapelayout></xml><![endif]-->
<META content="MSHTML 6.00.6000.16587" name=GENERATOR></HEAD>
<BODY lang=EN-US vLink=purple link=blue>
<DIV><SPAN class=304053520-31032008><FONT face=Arial color=#0000ff size=2>More 
than that, applications can also use ipoib and SDP in order to interop between 
windows and Linux.</FONT></SPAN></DIV>
<DIV><SPAN class=304053520-31032008><FONT face=Arial color=#0000ff 
size=2></FONT></SPAN> </DIV>
<DIV><SPAN class=304053520-31032008><FONT face=Arial color=#0000ff 
size=2>Thanks</FONT></SPAN></DIV>
<DIV><SPAN class=304053520-31032008><FONT face=Arial color=#0000ff 
size=2>Tzachi</FONT></SPAN></DIV><BR>
<BLOCKQUOTE dir=ltr 
style="PADDING-LEFT: 5px; MARGIN-LEFT: 5px; BORDER-LEFT: #0000ff 2px solid; MARGIN-RIGHT: 0px">
  <DIV class=OutlookMessageHeader lang=en-us dir=ltr align=left>
  <HR tabIndex=-1>
  <FONT face=Tahoma size=2><B>From:</B> ofw-bounces@lists.openfabrics.org 
  [mailto:ofw-bounces@lists.openfabrics.org] <B>On Behalf Of </B>Fab 
  Tillier<BR><B>Sent:</B> Monday, March 31, 2008 8:34 PM<BR><B>To:</B> Smith, 
  Stan; Ben Shapiro; ofw@lists.openfabrics.org<BR><B>Subject:</B> RE: [ofw] 
  ***SPAM*** error between Linux and Windows 2003<BR></FONT><BR></DIV>
  <DIV></DIV>
  <DIV class=Section1>
  <P class=MsoNormal><SPAN style="COLOR: #1f497d">Actually, that’s not quite 
  true.  If you use an app that uses the RDMA CM then Stan is correct, due 
  to there not being an RDMA CM in the Windows stack.  However if an app is 
  using the IB CM directly, things will interop just fine if the application 
  keeps its wire protocol the same.<o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="COLOR: #1f497d"><o:p> </o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="COLOR: #1f497d">-Fab<o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="COLOR: #1f497d"><o:p> </o:p></SPAN></P>
  <DIV>
  <DIV 
  style="BORDER-RIGHT: medium none; PADDING-RIGHT: 0in; BORDER-TOP: #b5c4df 1pt solid; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; BORDER-LEFT: medium none; PADDING-TOP: 3pt; BORDER-BOTTOM: medium none">
  <P class=MsoNormal><B><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: " 
  Tahoma?,?sans-serif??>From:</SPAN></B><SPAN 
  style="FONT-SIZE: 10pt; FONT-FAMILY: " Tahoma?,?sans-serif??> 
  ofw-bounces@lists.openfabrics.org [mailto:ofw-bounces@lists.openfabrics.org] 
  <B>On Behalf Of </B>Smith, Stan<BR><B>Sent:</B> Monday, March 31, 2008 10:25 
  AM<BR><B>To:</B> Ben Shapiro; ofw@lists.openfabrics.org<BR><B>Subject:</B> RE: 
  [ofw] ***SPAM*** error between Linux and Windows 
  2003<o:p></o:p></SPAN></P></DIV></DIV>
  <P class=MsoNormal><o:p> </o:p></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: " color:blue? 
  Arial?,?sans-serif?;>Plain and simple - Linux and Windows can not successfully 
  communicate over IB QPs unless you are using the DAPL socket CM 
  provider.</SPAN><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " Roman?,?serif?? 
  New Times><o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: " color:blue? 
  Arial?,?sans-serif?;>The problem is differences in the CM wire protocols 
  between Linux & Windows; specifically format and handling of private 
  data.</SPAN><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " Roman?,?serif?? New 
  Times><o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " 
  Roman?,?serif?? New Times> <o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: " color:blue? 
  Arial?,?sans-serif?;>If your application were to exchange QP information over 
  sockets and both sides set identical QP attributes, and transitioned QP states 
  manually (all of what a CM does), then you can communicate Linux to Windows 
  over IB QPs. Not a recommended approach, highly prone to errors.</SPAN><SPAN 
  style="FONT-SIZE: 12pt; FONT-FAMILY: " Roman?,?serif?? New 
  Times><o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " 
  Roman?,?serif?? New Times> <o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: " color:blue? 
  Arial?,?sans-serif?;>This problem is being addressed by Sean Hefty as he is 
  migrating a variant of Linux rdma_cm into the Windows IB stack.</SPAN><SPAN 
  style="FONT-SIZE: 12pt; FONT-FAMILY: " Roman?,?serif?? New 
  Times><o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: " color:blue? 
  Arial?,?sans-serif?;>The work is ongoing and not scheduled to be ready until 
  Aug/Sept. time frame.</SPAN><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " 
  Roman?,?serif?? New Times><o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " 
  Roman?,?serif?? New Times> <o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: " color:blue? 
  Arial?,?sans-serif?;>stan.</SPAN><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " 
  Roman?,?serif?? New Times><o:p></o:p></SPAN></P>
  <P class=MsoNormal><SPAN style="FONT-SIZE: 12pt; FONT-FAMILY: " 
  Roman?,?serif?? New Times><o:p> </o:p></SPAN></P>
  <DIV class=MsoNormal style="TEXT-ALIGN: center" align=center><SPAN 
  style="FONT-SIZE: 12pt; FONT-FAMILY: " Roman?,?serif?? New Times>
  <HR align=center width="100%" SIZE=2>
  </SPAN></DIV>
  <P class=MsoNormal style="MARGIN-BOTTOM: 12pt"><B><SPAN 
  style="FONT-SIZE: 10pt; FONT-FAMILY: " 
  Tahoma?,?sans-serif??>From:</SPAN></B><SPAN 
  style="FONT-SIZE: 10pt; FONT-FAMILY: " Tahoma?,?sans-serif??> 
  ofw-bounces@lists.openfabrics.org [mailto:ofw-bounces@lists.openfabrics.org] 
  <B>On Behalf Of </B>Ben Shapiro<BR><B>Sent:</B> Monday, March 31, 2008 5:58 
  AM<BR><B>To:</B> ofw@lists.openfabrics.org<BR><B>Subject:</B> [ofw] ***SPAM*** 
  error between Linux and Windows 2003</SPAN><SPAN 
  style="FONT-SIZE: 12pt; FONT-FAMILY: " Roman?,?serif?? New 
  Times><o:p></o:p></SPAN></P>
  <P class=MsoNormal>Has anyone run into  this problem 
  before:<o:p></o:p></P>
  <P class=MsoNormal><o:p> </o:p></P>
  <P class=MsoNormal>> I was attempting to do some Infiniband testing between 
  a Windows 2003 <o:p></o:p></P>
  <P class=MsoNormal>> server and a SLES10 box using ib_send_bw. I got some 
  error <o:p></o:p></P>
  <P class=MsoNormal>> messages/statuses. Is there any documentation out 
  there where I could <o:p></o:p></P>
  <P class=MsoNormal>> look up the error messages?<o:p></o:p></P>
  <P class=MsoNormal>><o:p> </o:p></P>
  <P class=MsoNormal>> I tried it both ways and here are the error message I 
  got (not sure <o:p></o:p></P>
  <P class=MsoNormal>> which was which way):<o:p></o:p></P>
  <P class=MsoNormal>><o:p> </o:p></P>
  <P class=MsoNormal>> Completion wth error at client:<o:p></o:p></P>
  <P class=MsoNormal>><o:p> </o:p></P>
  <P class=MsoNormal>> Failed status 12: wr_id 1 syndrom 0x81 Scnt=300 
  ccnt=0<o:p></o:p></P>
  <P class=MsoNormal>><o:p> </o:p></P>
  <P class=MsoNormal>> Completion wth error at client:<o:p></o:p></P>
  <P class=MsoNormal>><o:p> </o:p></P>
  <P class=MsoNormal>> Failed status 9: wr_id 1 syndrom 0x81<o:p></o:p></P>
  <P class=MsoNormal>> Scnt=1000 
ccnt=0<o:p></o:p></P></DIV></BLOCKQUOTE></BODY></HTML>