I restarted openibd and now my interfaces are up.<br><br>mach#1<br>ib0       Link encap:InfiniBand  HWaddr 80:00:00:02:FE:80:00:00:00:00:00:00:00:00:00:00:00:00:00:00<br>          inet addr:<a href="http://140.221.37.46">140.221.37.46
</a>  Bcast:<a href="http://140.221.37.255">140.221.37.255</a>  Mask:<a href="http://255.255.255.0">255.255.255.0</a><br>          inet6 addr: fe80::211:7500:ff:d7f2/64 Scope:Link<br><br>mach#2<br>ib0       Link encap:InfiniBand  HWaddr 80:00:00:03:FE:80:00:00:00:00:00:00:00:00:00:00:00:00:00:00
<br>          inet addr:<a href="http://140.221.37.32">140.221.37.32</a>  Bcast:<a href="http://140.221.37.255">140.221.37.255</a>  Mask:<a href="http://255.255.255.0">255.255.255.0</a><br>          inet6 addr: fe80::211:7500:ff:d802/64 Scope:Link
<br><br>I am able to "ping <a href="http://140.221.37.46">140.221.37.46</a>" from machine#2.<br><br>mach#2 > ping <a href="http://140.221.37.46">140.221.37.46</a><br>PING <a href="http://140.221.37.46">140.221.37.46
</a> (<a href="http://140.221.37.46">140.221.37.46</a>) 56(84) bytes of data.<br>64 bytes from <a href="http://140.221.37.46">140.221.37.46</a>: icmp_seq=1 ttl=64 time=2.49 ms<br>64 bytes from <a href="http://140.221.37.46">
140.221.37.46</a>: icmp_seq=2 ttl=64 time=0.106 ms<br>64 bytes from <a href="http://140.221.37.46">140.221.37.46</a>: icmp_seq=3 ttl=64 time=0.098 ms<br>--- <a href="http://140.221.37.46">140.221.37.46</a> ping statistics ---
<br>3 packets transmitted, 3 received, 0% packet loss, time 2002ms<br>rtt min/avg/max/mdev = 0.098/0.900/2.498/1.130 ms<br><br>But sockets over SDP still gives me the same "Network Unreachable error".<br><br>--- 
<a href="http://140.221.37.46">140.221.37.46</a> ping statistics ---<br>3 packets transmitted, 3 received, 0% packet loss, time 2002ms<br>rtt min/avg/max/mdev = 0.098/0.900/2.498/1.130 ms<br><br><br><div><span class="gmail_quote">
On 10/5/07, <b class="gmail_sendername">Scott Weitzenkamp (sweitzen)</b> <<a href="mailto:sweitzen@cisco.com">sweitzen@cisco.com</a>> wrote:</span><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">




<div>
<div dir="ltr" align="left"><span><font color="#0000ff" face="Arial" size="2">Can you ping between the two nodes using the IPoIB IP 
address?</font></span></div>
<div> </div>
<div align="left"><font face="Arial" size="2">Scott Weitzenkamp</font></div>
<div align="left"><font face="Arial" size="2">SQA and Release Manager</font></div>
<div align="left"><font face="Arial" size="2">Server Virtualization Business 
Unit</font></div>
<div align="left"><font face="Arial" size="2">Cisco Systems</font></div>
<div> </div><br>
<blockquote style="border-left: 2px solid rgb(0, 0, 255); padding-left: 5px; margin-left: 5px; margin-right: 0px;">
  <div dir="ltr" align="left" lang="en-us">
  <hr>
  <font face="Tahoma" size="2"><b>From:</b> <a href="mailto:general-bounces@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general-bounces@lists.openfabrics.org</a> 
  [mailto:<a href="mailto:general-bounces@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general-bounces@lists.openfabrics.org</a>] <b>On Behalf Of </b>Zulfi 
  Imani<br><b>Sent:</b> Friday, October 05, 2007 3:01 PM<br><b>To:</b> 
  <a href="mailto:dotanb@dev.mellanox.co.il" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">dotanb@dev.mellanox.co.il</a><br><b>Cc:</b> 
  <a href="mailto:general@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general@lists.openfabrics.org</a><br><b>Subject:</b> Re: [ofa-general] Problem 
  running SDP apps using OFED 1.2<br></font><br></div><div><span class="e" id="q_11572364c075c398_1">
  <div></div>Hi Dotan,<br><br>ifconfig shows 
  up<br><br>ib0       Link encap:InfiniBand  
  HWaddr 80:00:00:03:FE:80:00:00:00:00:00:00:00:00:00:00:00:00:00:00 
  <br>          inet addr: <a href="http://140.221.37.32" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">140.221.37.32</a>  Bcast:<a href="http://140.221.37.255" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">
 140.221.37.255</a>  Mask:<a href="http://255.255.255.0" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">255.255.255.0</a><br>          
  inet6 addr: fe80::211:7500:ff:d802/64 Scope:Link 
  <br>          UP BROADCAST 
  RUNNING MULTICAST  MTU:65520  
  Metric:1<br>          RX 
  packets:0 errors:0 dropped:0 overruns:0 
  frame:0<br>          TX packets:1 
  errors:0 dropped:5 overruns:0 
  carrier:0<br>          
  collisions:0 txqueuelen:128 
  <br>          RX bytes:0 (0.0 
  b)  TX bytes:68 (68.0 b)<br><br>does this mean that the apps would now 
  use IPoIB ? How do i tell when IPoIB is working and when it isnt ? Because I 
  assume when it isnt it would default to Ethernet ? <br><br>It will be great if 
  I can get this cleared.<br><br>Thanks<br>Zulfi<br><br>
  <div><span class="gmail_quote">On 9/30/07, <b class="gmail_sendername">Dotan 
  Barak</b> <<a href="mailto:dotanb@dev.mellanox.co.il" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)"> 
  dotanb@dev.mellanox.co.il </a>> wrote:</span>
  <blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">Does 
    a simple "ping" between the nodes is working?<br>(this way you can be sure 
    that IPoIB is working and SDP should work) <br><br>Dotan<br><br><br>Zulfi 
    Imani wrote:<br>> I have not tried over IPoIB, but opensm is 
    running<br>><br>> /home/zulfi > sminfo<br>> sminfo: sm lid 1 sm 
    guid 0x11750000ffdaf4, activity count 16220<br>> priority 0 state 3 
    SMINFO_MASTER <br>><br>> I also tried a few iband utilities and they 
    all work fine. Not able to<br>> run any socket apps over 
    SDP.<br>><br>> Thanks<br>> Zulfi<br>><br>> On 9/27/07, *Jim 
    Mott* <<a href="mailto:jimmott@austin.rr.com" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)"> 
    jimmott@austin.rr.com</a><br>> <mailto:<a href="mailto:jimmott@austin.rr.com" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">jimmott@austin.rr.com</a>>> 
    wrote:<br>><br>>     Were you able to connect 
    IPoIB between the nodes?  Are you sure 
    <br>>     opensm was running?  I am ashamed 
    to admit that occasionally I <br>>     forget to 
    start opensm and wonder why SDP does not 
    connect.<br>><br>><br>><br>>     *From:* <a href="mailto:general-bounces@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general-bounces@lists.openfabrics.org
</a><br>>     
    <mailto: <a href="mailto:general-bounces@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general-bounces@lists.openfabrics.org</a>> 
    [mailto:<br>>     <a href="mailto:general-bounces@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general-bounces@lists.openfabrics.org</a><br>>     
    <mailto:<a href="mailto:general-bounces@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general-bounces@lists.openfabrics.org</a>>] *On Behalf 
    Of<br>>     *Zulfi Imani 
    <br>>     *Sent:* Thursday, September 27, 2007 3:22 
    PM<br>>     *To:* <a href="mailto:general@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general@lists.openfabrics.org</a><br>>     
    <mailto:<a href="mailto:general@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)"> 
    general@lists.openfabrics.org</a>><br>>     
    *Subject:* [ofa-general] Problem running SDP apps using OFED 
    1.2<br>><br>><br>><br>>     
    Hi,<br>><br>>     I installed the OFED1.2 stack 
    and am trying to run a simple socket<br>>     server 
    and client over the SDP stack. The Infiniband hardware 
    is<br>>     QLogic. 
    <br>><br>>     First I set the ENV 
    vars<br>>     export 
    LD_PRELOAD=/root/zulfi/iband/INSTALL/lib64/libsdp.so<br>><br>>     
    export 
    LIBSDP_CONFIG_FILE=/home/zulfi/libsdp.conf<br>><br>><br>>     
    The SDP config file has: <br>>     *use sdp server * 
    *:*<br>>     use sdp client * 
    *:*<br>>     *<br>>     Then 
    started the socket server and did a 'sdpnetstat -San' 
    and<br>>     found that it listed the SDP port on 
    which the server was listening. <br>><br>>     On 
    the client machine too I did the same; exported the 
    variables,<br>>     setup the SDP config file and on 
    running the client './client<br>>     port# 
    server_machine' it gave me a "network not reachable" error. 
    <br>><br>>     I tried to get some information 
    about the error on the net but<br>>     could not 
    find any.<br>><br>>     I then checked the 
    /proc/<pid>/maps file and found that 
    libsdp.so<br>>     was being loaded. 
    <br>>     also:<br>>     /root 
    > lsmod | grep sdp<br>>     
    ib_sdp                120224  3<br>><br>>     
    Does QLogic support SDP applications ? Or am I missing 
    something<br>>     in the SDP config file or do I 
    need to make changes to my code ? <br>><br>>     
    Any information on this will be a big 
    help.<br>><br>>     
    Thanks,<br>>     
    Zulfi<br>><br>><br>><br>><br>><br>><br>> --<br>> 
    Regs,<br>> Zulfi<br>> 
    ------------------------------------------------------------------------ 
    <br>><br>> _______________________________________________<br>> 
    general mailing list<br>> <a href="mailto:general@lists.openfabrics.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">general@lists.openfabrics.org</a><br>> <a href="http://lists.openfabrics.org/cgi-bin/mailman/listinfo/general" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">
http://lists.openfabrics.org/cgi-bin/mailman/listinfo/general</a><br>><br>> 
    To unsubscribe, please visit <a href="http://openib.org/mailman/listinfo/openib-general" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">http://openib.org/mailman/listinfo/openib-general</a> 
  <br><br></blockquote></div><br><br clear="all"><br>-- <br>Regs,<br>Zulfi 
</span></div></blockquote></div>
</blockquote></div><br><br clear="all"><br>-- <br>Regs,<br>Zulfi