Hi,<div><br></div><div>I'm new to Chelsio.</div><div><br></div><div>I think I followed all the steps mentioned in OFED-1.4.1/docs/cxgb3_release_notes.txt including upgrading the firmware, eeprom etc.</div><div><br></div>
<div>The ports on the two nodes appear to be ACTIVE and the IP interfaces seem to be up. </div><div>However, I'm unable to ping the two nodes and rping is also failing.</div><div><br></div><div><div>Do I need to turn on the "peer2peer" option?</div>
<div><br></div></div><div>Any tips or ideas would be much appreciated.</div><div><br></div><div><br></div><div>One of the nodes had this in /var/log/messages but the port seems to be Active.</div><div><br></div><div><div>
xgb3 0000:13:00.0: TP parity error (0x8000000)</div><div>cxgb3 0000:13:00.0: encountered fatal error, operation suspended</div><div>cxgb3 0000:13:00.0: FW status: 0x0, 0x0, 0x0, 0x0</div><div>iw_cxgb3: Chelsio T3 RDMA Driver - version 1.1</div>
<div>iw_cxgb3: Initialized device 0000:13:00.0</div><div>ADDRCONF(NETDEV_UP): eth2: link is not ready</div><div>eth2: link up, 10Gbps, full-duplex</div><div>ADDRCONF(NETDEV_CHANGE): eth2: link becomes ready</div><div>eth2: no IPv6 routers present</div>
<div>ADDRCONF(NETDEV_UP): eth2: link is not ready</div><div>eth2: link up, 10Gbps, full-duplex</div><div>ADDRCONF(NETDEV_CHANGE): eth2: link becomes ready</div><div>eth2: no IPv6 routers present</div><div><br></div><div><div>
[root@lv1 cxgb3_0]# lspci | grep Chelsio</div><div>13:00.0 Ethernet controller: Chelsio Communications Inc T320 10GbE Dual Port Adapter</div><div><br></div><div><div>[root@lv1 cxgb3_0]# cat fw_ver </div><div>T 7.4.0 TP 1.1.0</div>
<div><br></div></div></div><div><div>[root@lv1 ~]# lsmod | grep cxgb</div><div>iw_cxgb3              107476  1 </div><div>ib_core               109568  16 rdma_ucm,qlgc_vnic,ib_sdp,rdma_cm,iw_cm,ib_ipoib,ib_cm,ib_sa,ib_uverbs,ib_umad,iw_nes,iw_cxgb3,ib_ipath,mlx4_ib,ib_mthca,ib_mad</div>
<div>cxgb3                 161008  1 iw_cxgb3</div><div><br></div><div><br></div></div><div><div>[root@lv1 chelsio]# cat /sys/class/infiniband/cxgb3_0/ports/1/state </div></div></div><div><div>4: ACTIVE</div><div><br></div>
<div><div>eth2      Link encap:Ethernet  HWaddr 00:07:43:05:C9:FB  </div><div>          inet addr:192.168.10.30  Bcast:192.168.10.255  Mask:255.255.255.0</div><div>          inet6 addr: fe80::207:43ff:fe05:c9fb/64 Scope:Link</div>
<div>          UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1</div><div>          RX packets:3 errors:0 dropped:0 overruns:0 frame:0</div><div>          TX packets:0 errors:0 dropped:0 overruns:0 carrier:0</div><div>          collisions:0 txqueuelen:1000 </div>
<div>          RX bytes:1038 (1.0 KiB)  TX bytes:0 (0.0 b)</div><div>          Interrupt:82 Memory:fdff0000-fdff0fff </div><div><br></div></div><div><div><div><br></div><div><br></div><div><br></div></div></div></div>