<br><font size=2 face="sans-serif">We are seeing a latency problem that
seems to be specific to the Mellanox MT25204 HCA.</font>
<br><font size=2 face="sans-serif">We do not see the same problem with
MT25208 HCAs running in MT23108 compatibility mode.</font>
<br><font size=2 face="sans-serif">The problem is demonstrated running
multiple streams of ib_rdma_lat.</font>
<br>
<br><font size=2 face="sans-serif">On the SDR MT25208 HCA:</font>
<br><font size=2 face="sans-serif">         
      typical latency</font>
<br><font size=2 face="sans-serif">1 stream        3.70
usec</font>
<br><font size=2 face="sans-serif">2 streams        
4.47 usec</font>
<br><font size=2 face="sans-serif">4 streams        6.74
usec</font>
<br>
<br><font size=2 face="sans-serif">On the DDR MT25204 HCA:</font>
<br><font size=2 face="sans-serif">         
      typical latency</font>
<br><font size=2 face="sans-serif">1 stream        3.03
usec</font>
<br><font size=2 face="sans-serif">2 streams        7.36
usec</font>
<br><font size=2 face="sans-serif">4 streams        22.4
usec</font>
<br>
<br><font size=2 face="sans-serif">Can anyone explain this behavior?</font>
<br>
<br><font size=2 face="sans-serif">We are running OFED 1.0 release on a
pair of EM64T dual CPU nodes.</font>
<br>
<br><font size=2 face="sans-serif">ibstat output:</font>
<br><font size=2 face="sans-serif">CA 'mthca0'</font>
<br><font size=2 face="sans-serif">        CA type:
MT25208 (MT23108 compat mode)</font>
<br><font size=2 face="sans-serif">        Number of
ports: 2</font>
<br><font size=2 face="sans-serif">        Firmware
version: 4.7.400</font>
<br><font size=2 face="sans-serif">        Hardware
version: a0</font>
<br><font size=2 face="sans-serif">        Node GUID:
0x0005ad0000035950</font>
<br><font size=2 face="sans-serif">        System image
GUID: 0x0005ad000100d050</font>
<br><font size=2 face="sans-serif">        Port 1:</font>
<br><font size=2 face="sans-serif">           
    State: Active</font>
<br><font size=2 face="sans-serif">           
    Physical state: LinkUp</font>
<br><font size=2 face="sans-serif">           
    Rate: 10</font>
<br><font size=2 face="sans-serif">           
    Base lid: 21</font>
<br><font size=2 face="sans-serif">           
    LMC: 0</font>
<br><font size=2 face="sans-serif">           
    SM lid: 16</font>
<br><font size=2 face="sans-serif">           
    Capability mask: 0x02500a68</font>
<br><font size=2 face="sans-serif">           
    Port GUID: 0x0005ad0000035951</font>
<br><font size=2 face="sans-serif">        Port 2:</font>
<br><font size=2 face="sans-serif">           
    State: Down</font>
<br><font size=2 face="sans-serif">           
    Physical state: Polling</font>
<br><font size=2 face="sans-serif">           
    Rate: 10</font>
<br><font size=2 face="sans-serif">           
    Base lid: 0</font>
<br><font size=2 face="sans-serif">           
    LMC: 0</font>
<br><font size=2 face="sans-serif">           
    SM lid: 0</font>
<br><font size=2 face="sans-serif">           
    Capability mask: 0x02500a68</font>
<br><font size=2 face="sans-serif">           
    Port GUID: 0x0005ad0000035952</font>
<br><font size=2 face="sans-serif">CA 'mthca1'</font>
<br><font size=2 face="sans-serif">        CA type:
MT25204</font>
<br><font size=2 face="sans-serif">        Number of
ports: 1</font>
<br><font size=2 face="sans-serif">        Firmware
version: 1.0.800</font>
<br><font size=2 face="sans-serif">        Hardware
version: a0</font>
<br><font size=2 face="sans-serif">        Node GUID:
0x0002c90200216e40</font>
<br><font size=2 face="sans-serif">        System image
GUID: 0x0002c90200216e43</font>
<br><font size=2 face="sans-serif">        Port 1:</font>
<br><font size=2 face="sans-serif">           
    State: Active</font>
<br><font size=2 face="sans-serif">           
    Physical state: LinkUp</font>
<br><font size=2 face="sans-serif">           
    Rate: 20</font>
<br><font size=2 face="sans-serif">           
    Base lid: 22</font>
<br><font size=2 face="sans-serif">           
    LMC: 0</font>
<br><font size=2 face="sans-serif">           
    SM lid: 22</font>
<br><font size=2 face="sans-serif">           
    Capability mask: 0x02500a6a</font>
<br><font size=2 face="sans-serif">           
    Port GUID: 0x0002c90200216e41</font>
<br>
<br><font size=2 face="sans-serif">-Don</font>