<br>Michael,<br><br>netperf works with sdp.<br><br>slabinfo output:<br>slabinfo - version: 2.1 (statistics)<br># name            <active_objs> <num_objs> <objsize> <objperslab> <pagesperslab> : tunables <limit> <batchcount> <sharedfactor> : slabdata <active_slabs> <num_slabs> <sharedavail> : globalstat <listallocs> <maxobjs> <grown> <reaped> <error> <maxfreeable> <nodeallocs> <remotefrees> : cpustat <allochit> <allocmiss> <freehit> <freemiss><br>SDP                    0      0   1172    6    2 : tunables   24   12    8 : slabdata      0     
 0      0 : globalstat     104     18    11   11               0    0    0    0 : cpustat      3     17     20      0<br>fib6_nodes             7     92     40   92    1 : tunables   32   16    8 : slabdata      1      1      0 : globalstat      32     21     1    0               0   
 0    0    0 : cpustat      5      2      0      0<br>ip6_dst_cache          9     17    228   17    1 : tunables   32   16    8 : slabdata      1      1      0 : globalstat      36     17     1    0               0    0    0    0 : cpustat     14      3      8      0<br>ndisc_cache           
 2     22    180   22    1 : tunables   32   16    8 : slabdata      1      1      0 : globalstat      32     17     1    0               0    0    0    0 : cpustat      3      2      3      0<br>RAWv6                  7     11    712   11    2 : tunables   32   16    8 : slabdata      1     
 1      0 : globalstat      11     11     1    0               0    0    0    0 : cpustat      6      1      0      0<br>UDPv6                  1     11    684   11    2 : tunables   32   16    8 : slabdata      1      1      0 : globalstat      52     22     2   
 1               0    0    0    0 : cpustat     10      5     14      0<br><br>Amit<br><br><b><i>"Michael S. Tsirkin" <mst@mellanox.co.il></i></b> wrote:<blockquote class="replbq" style="border-left: 2px solid rgb(16, 16, 255); margin-left: 5px; padding-left: 5px;"> Quoting r. amit byron <amit_byron@yahoo.com>:<br>> Subject: sdp with kernel 2.6.16.14<br>> <br>> <br>> hi,<br>> <br>> i'm trying to get sdp work between point-to-point connected<br>> machines running kernel 2.6.16.24. i have configured ipoib<br>> and trying to run iperf using sdp.<br>> <br>> the client machine has an entry in its libsdp.conf:<br>> match destination 192.168.1.2<br>> <br>> the server machine has na entry in its libsdp.conf:<br>> match listen
 *:5001<br>> <br>> iperf is started on the server machine using command:<br>> LD_PRELOAD=/usr/local/lib/libsdp.so  iperf -s<br>> <br>> iperf client is started on the client machine using command:<br>> LD_PRELOAD=/usr/local/lib/libsdp.so  iperf -c 192.168.1.2<br>> <br>> the server machine panics with following messages:<br>> <br>> oom-killer: gfp_mask=0xd0, order=0<br>>  [<c014ed15>] oom-killer: gfp_mask=0xd0, order=0<br>>  [<c014ed15>] out_of_memory+0x155/0x180<br>>  [<c0150fa5>] __alloc_pages+0x2a5/0x320<br>>  [<c01512ce>] __get_free_pages+0x1e/0x40<br>>  [<c0181bd0>] __pollwait+0x80/0xd0<br>>  [<c017aa6d>] pipe_poll+0xcd/0xe0<br>>  [<c0181e32>] do_select+0x212/0x480<br>>  [<c0168e15>] cache_free_debugcheck+0x135/0x230<br>>  [<c0181b50>] __pollwait+0x0/0xd0<br>>  [<c01828ae>] core_sys_select+0x1ce/0x2e0<br>>  [<c0182d21>] sys_select+0x51/0x1c0<br>>  [<c0104173>] sysenter_past_esp+0x54/0x75<br>> DMA
 per-cpu:<br>> cpu 0 hot: high 0, batch 1 used:0<br>> cpu 0 cold: high 0, batch 1 used:0<br>> cpu 1 hot: high 0, batch 1 used:0<br>> cpu 1 cold: high 0, batch 1 used:0<br>> cpu 2 hot: high 0, batch 1 used:0<br>> cpu 2 cold: high 0, batch 1 used:0<br>> cpu 3 hot: high 0, batch 1 used:0<br>> cpu 3 cold: high 0, batch 1 used:0<br>> DMA32 per-cpu: empty<br>> Normal per-cpu:<br>> cpu 0 hot: high 186, batch 31 used:103<br>> cpu 0 cold: high 62, batch 15 used:61<br>> cpu 1 hot: high 186, batch 31 used:183<br>> cpu 1 cold: high 62, batch 15 used:53<br>> cpu 2 hot: high 186, batch 31 used:28<br>> cpu 2 cold: high 62, batch 15 used:54<br>> cpu 3 hot: high 186, batch 31 used:63<br>> cpu 3 cold: high 62, batch 15 used:60<br>> HighMem per-cpu:<br>> cpu 0 hot: high 186, batch 31 used:176<br>> cpu 0 cold: high 62, batch 15 used:13<br>> cpu 1 hot: high 186, batch 31 used:169<br>> cpu 1 cold: high 62, batch 15
 used:1<br>> cpu 2 hot: high 186, batch 31 used:157<br>> cpu 2 cold: high 62, batch 15 used:0<br>> cpu 3 hot: high 186, batch 31 used:174<br>> cpu 3 cold: high 62, batch 15 used:6<br>> Free pages:     7366104kB (7358760kB HighMem)<br>> Active:5351 inactive:4885 dirty:0 writeback:0 unstable:0 free:1841526 slab:8970 mapped:4565 pagetables:238<br>> DMA free:3588kB min:68kB low:84kB high:100kB active:0kB inactive:0kB present:16384kB pages_scanned:8 all_unreclaimable? yes<br>> lowmem_reserve[]: 0 0 880 8623<br>> DMA32 free:0kB min:0kB low:0kB high:0kB active:0kB inactive:0kB present:0kB pages_scanned:0 all_unreclaimable? no<br>> lowmem_reserve[]: 0 0 880 8623<br>> Normal free:3756kB min:3756kB low:4692kB high:5632kB active:232kB inactive:0kB present:901<br>> 120kB pages_scanned:314 all_unreclaimable? yes<br>> lowmem_reserve[]: 0 0 0 61951<br>> HighMem free:7358760kB min:512kB low:8780kB high:17052kB active:21172kB inactive:19540kB
 present:7929852kB pages_scanned:0 all_unreclaimable? no<br>> lowmem_reserve[]: 0 0 0 0<br>> DMA: 1*4kB 0*8kB 0*16kB 0*32kB 0*64kB 0*128kB 0*256kB 1*512kB 1*1024kB 1*2048kB 0*4096kB = 3588kB<br>> DMA32: empty<br>> Normal: 13*4kB 1*8kB 1*16kB 3*32kB 0*64kB 0*128kB 0*256kB 1*512kB 1*1024kB 1*2048kB 0*4096kB = 3756kB<br>> HighMem: 1672*4kB 1103*8kB 581*16kB 308*32kB 129*64kB 65*128kB 29*256kB 12*512kB 7*1024kB 2*2048kB 1778*4096kB = 7358760kB<br>> Swap cache: add 0, delete 0, find 0/0, race 0+0<br>> Free swap  = 0kB<br>> Total swap = 0kB<br>> Out of Memory: Kill process 2037 (mDNSResponder) score 2847 and children.<br>> Out of memory: Killed process 2037 (mDNSResponder).<br>> oom-killer: gfp_mask=0xd0, order=0<br>>  [<c014ed15>] out_of_memory+0x155/0x180<br>>  [<c0150fa5>] __alloc_pages+0x2a5/0x320<br>>  [<c01512ce>] __get_free_pages+0x1e/0x40<br>>  [<c0181bd0>] __pollwait+0x80/0xd0<br>>  [<c017aa6d>] pipe_poll+0xcd/0xe0<br>> 
 [<c0181e32>] do_select+0x212/0x480<br>>  [<c0168e15>] cache_free_debugcheck+0x135/0x230<br>>  [<c0181b50>] __pollwait+0x0/0xd0<br>>  [<c01828ae>] core_sys_select+0x1ce/0x2e0<br>>  [<c0182d21>] sys_select+0x51/0x1c0<br>>  [<c0104173>] sysenter_past_esp+0x54/0x75<br>> DMA per-cpu:<br>> cpu 0 hot: high 0, batch 1 used:0<br>> cpu 0 cold: high 0, batch 1 used:0<br>> cpu 1 hot: high 0, batch 1 used:0<br>> cpu 1 cold: high 0, batch 1 used:0<br>> cpu 2 hot: high 0, batch 1 used:0<br>> cpu 2 cold: high 0, batch 1 used:0<br>> cpu 3 hot: high 0, batch 1 used:0<br>> cpu 3 cold: high 0, batch 1 used:0<br>> DMA32 per-cpu: empty<br>> Normal per-cpu:<br>> cpu 0 hot: high 186, batch 31 used:103<br>> cpu 0 cold: high 62, batch 15 used:61<br>> cpu 1 hot: high 186, batch 31 used:183<br>> cpu 1 cold: high 62, batch 15 used:53<br>> cpu 2 hot: high 186, batch 31 used:29<br>> cpu 2 cold: high 62, batch 15 used:54<br>> cpu 3 hot:
 high 186, batch 31 used:63<br>> cpu 3 cold: high 62, batch 15 used:60<br>> HighMem per-cpu:<br>> cpu 0 hot: high 186, batch 31 used:176<br>> cpu 0 cold: high 62, batch 15 used:13<br>> cpu 1 hot: high 186, batch 31 used:169<br>> cpu 1 cold: high 62, batch 15 used:1<br>> cpu 2 hot: high 186, batch 31 used:179<br>> cpu 2 cold: high 62, batch 15 used:0<br>> cpu 3 hot: high 186, batch 31 used:174<br>> cpu 3 cold: high 62, batch 15 used:6<br>> Free pages:     7366476kB (7359132kB HighMem)<br>> Active:5273 inactive:4855 dirty:0 writeback:0 unstable:0 free:1841619 slab:8970 mapped:4423 pagetables:232<br>> DMA free:3588kB min:68kB low:84kB high:100kB active:0kB inactive:0kB present:16384kB pages_scanned:8 all_unreclaimable? yes<br>> lowmem_reserve[]: 0 0 880 8623<br>> DMA32 free:0kB min:0kB low:0kB high:0kB active:0kB inactive:0kB present:0kB pages_scanned:0 all_unreclaimable? no<br>> lowmem_reserve[]: 0 0 880 8623<br>> Normal
 free:3756kB min:3756kB low:4692kB high:5632kB active:232kB inactive:0kB present:901120kB pages_scanned:314 all_unreclaimable? yes<br>> lowmem_reserve[]: 0 0 0 61951<br>> HighMem free:7359132kB min:512kB low:8780kB high:17052kB active:20860kB inactive:19420kB present:7929852kB pages_scanned:0 all_unreclaimable? no<br>> lowmem_reserve[]: 0 0 0 0<br>> DMA: 1*4kB 0*8kB 0*16kB 0*32kB 0*64kB 0*128kB 0*256kB 1*512kB 1*1024kB 1*2048kB 0*4096kB = 3588kB<br>> DMA32: empty<br>> Normal: 13*4kB 1*8kB 1*16kB 3*32kB 0*64kB 0*128kB 0*256kB 1*512kB 1*1024kB 1*2048kB 0*4096kB = 3756kB<br>> HighMem: 1621*4kB 1073*8kB 562*16kB 303*32kB 137*64kB 69*128kB 30*256kB 12*512kB 7*1024kB 2*2048kB 1778*4096kB = 7359132kB<br>> Swap cache: add 0, delete 0, find 0/0, race 0+0<br>> Free swap  = 0kB<br>> Total swap = 0kB<br>> Out of Memory: Kill process 2134 (sendmail) score 1741 and children.<br>> Out of memory: Killed process 2134 (sendmail).<br>> oom-killer:
 gfp_mask=0xd0, order=0<br>>  [<c014ed15>] out_of_memory+0x155/0x180<br>>  [<c0150fa5>] __alloc_pages+0x2a5/0x320<br>>  [<c01512ce>] __get_free_pages+0x1e/0x40<br>>  [<c0181bd0>] __pollwait+0x80/0xd0<br>>  [<c017aa6d>] pipe_poll+0xcd/0xe0<br>>  [<c0181e32>] do_select+0x212/0x480<br>>  [<c0168e15>] cache_free_debugcheck+0x135/0x230<br>>  [<c0181b50>] __pollwait+0x0/0xd0<br>>  [<c01828ae>] core_sys_select+0x1ce/0x2e0<br>>  [<c0182d21>] sys_select+0x51/0x1c0<br>>  [<c0104173>] sysenter_past_esp+0x54/0x75<br>> <br>> openib source were retrieved with:<br>> svn co https://openib.org/svn/gen2/trunk<br>> <br>> anybody ran into similar problem, are there any sdp<br>> patches available?<br>> <br>> thanks,<br>> Amit<br><br>Netperf is running here fine. Can you try that to verify its not<br>a setup problem? I'll try iperf later.<br>Hmm. Where did all the memory go? can you<br>cat /proc/slabinfo<br><br>--
 <br>MST<br></c0104173></c0182d21></c01828ae></c0181b50></c0168e15></c0181e32></c017aa6d></c0181bd0></c01512ce></c0150fa5></c014ed15></c0104173></c0182d21></c01828ae></c0181b50></c0168e15></c0181e32></c017aa6d></c0181bd0></c01512ce></c0150fa5></c014ed15></c0104173></c0182d21></c01828ae></c0181b50></c0168e15></c0181e32></c017aa6d></c0181bd0></c01512ce></c0150fa5></c014ed15></c014ed15></amit_byron@yahoo.com></blockquote><br><p>__________________________________________________<br>Do You Yahoo!?<br>Tired of spam?  Yahoo! Mail has the best spam protection around <br>http://mail.yahoo.com