<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:x="urn:schemas-microsoft-com:office:excel" xmlns:p="urn:schemas-microsoft-com:office:powerpoint" xmlns:a="urn:schemas-microsoft-com:office:access" xmlns:dt="uuid:C2F41010-65B3-11d1-A29F-00AA00C14882" xmlns:s="uuid:BDC6E3F0-6DA3-11d1-A2A3-00AA00C14882" xmlns:rs="urn:schemas-microsoft-com:rowset" xmlns:z="#RowsetSchema" xmlns:b="urn:schemas-microsoft-com:office:publisher" xmlns:ss="urn:schemas-microsoft-com:office:spreadsheet" xmlns:c="urn:schemas-microsoft-com:office:component:spreadsheet" xmlns:oa="urn:schemas-microsoft-com:office:activation" xmlns:html="http://www.w3.org/TR/REC-html40" xmlns:q="http://schemas.xmlsoap.org/soap/envelope/" xmlns:D="DAV:" xmlns:x2="http://schemas.microsoft.com/office/excel/2003/xml" xmlns:ois="http://schemas.microsoft.com/sharepoint/soap/ois/" xmlns:dir="http://schemas.microsoft.com/sharepoint/soap/directory/" xmlns:ds="http://www.w3.org/2000/09/xmldsig#" xmlns:dsp="http://schemas.microsoft.com/sharepoint/dsp" xmlns:udc="http://schemas.microsoft.com/data/udc" xmlns:xsd="http://www.w3.org/2001/XMLSchema" xmlns:sub="http://schemas.microsoft.com/sharepoint/soap/2002/1/alerts/" xmlns:ec="http://www.w3.org/2001/04/xmlenc#" xmlns:sp="http://schemas.microsoft.com/sharepoint/" xmlns:sps="http://schemas.microsoft.com/sharepoint/soap/" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:udcxf="http://schemas.microsoft.com/data/udc/xmlfile" xmlns:wf="http://schemas.microsoft.com/sharepoint/soap/workflow/" xmlns:mver="http://schemas.openxmlformats.org/markup-compatibility/2006" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns:mrels="http://schemas.openxmlformats.org/package/2006/relationships" xmlns:ex12t="http://schemas.microsoft.com/exchange/services/2006/types" xmlns:ex12m="http://schemas.microsoft.com/exchange/services/2006/messages" xmlns:Z="urn:schemas-microsoft-com:" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=us-ascii">
<meta name=Generator content="Microsoft Word 12 (filtered medium)">
<!--[if !mso]>
<style>
v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style>
<![endif]-->
<style>
<!--
/* Font Definitions */
@font-face
{font-family:"Cambria Math";
panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
{font-family:Tahoma;
panose-1:2 11 6 4 3 5 4 4 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0in;
margin-bottom:.0001pt;
font-size:12.0pt;
font-family:"Times New Roman","serif";}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:blue;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:purple;
text-decoration:underline;}
span.EmailStyle17
{mso-style-type:personal;
font-family:"Calibri","sans-serif";
color:#1F497D;}
span.EmailStyle19
{mso-style-type:personal-reply;
font-family:"Calibri","sans-serif";
color:#1F497D;}
.MsoChpDefault
{mso-style-type:export-only;
font-size:10.0pt;}
@page Section1
{size:8.5in 11.0in;
margin:1.0in 1.0in 1.0in 1.0in;}
div.Section1
{page:Section1;}
-->
</style>
<!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang=EN-US link=blue vlink=purple>
<div class=Section1>
<p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";
color:#1F497D'>Ok. Can you describe what the problem is that is being worked
around?<o:p></o:p></span></p>
<p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";
color:#1F497D'><o:p> </o:p></span></p>
<p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";
color:#1F497D'>Thanks,<o:p></o:p></span></p>
<p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";
color:#1F497D'>-Fab<o:p></o:p></span></p>
<p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";
color:#1F497D'><o:p> </o:p></span></p>
<div>
<div style='border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in'>
<p class=MsoNormal><b><span style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'>From:</span></b><span
style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'> Reuven Amitai
[mailto:reuven@mellanox.co.il] <br>
<b>Sent:</b> Wednesday, April 09, 2008 10:14 AM<br>
<b>To:</b> Fab Tillier; ofw@lists.openfabrics.org<br>
<b>Subject:</b> RE: [PATCH] mtcr<o:p></o:p></span></p>
</div>
</div>
<p class=MsoNormal><o:p> </o:p></p>
<div>
<p class=MsoNormal><span style='font-size:10.0pt;font-family:"Arial","sans-serif";
color:blue'>Workaround.</span><o:p></o:p></p>
</div>
<p class=MsoNormal><o:p> </o:p></p>
<div class=MsoNormal align=center style='text-align:center'>
<hr size=2 width="100%" align=center>
</div>
<p class=MsoNormal style='margin-bottom:12.0pt'><b><span style='font-size:10.0pt;
font-family:"Tahoma","sans-serif"'>From:</span></b><span style='font-size:10.0pt;
font-family:"Tahoma","sans-serif"'> Fab Tillier
[mailto:ftillier@windows.microsoft.com] <br>
<b>Sent:</b> Wednesday, April 09, 2008 7:54 PM<br>
<b>To:</b> Reuven Amitai; ofw@lists.openfabrics.org<br>
<b>Subject:</b> RE: [PATCH] mtcr</span><o:p></o:p></p>
<p class=MsoNormal>What is WA?<o:p></o:p></p>
<p class=MsoNormal><o:p> </o:p></p>
<div>
<div style='border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in'>
<p class=MsoNormal><b>From:</b> ofw-bounces@lists.openfabrics.org
[mailto:ofw-bounces@lists.openfabrics.org] <b>On Behalf Of </b>Reuven Amitai<br>
<b>Sent:</b> Wednesday, April 09, 2008 6:27 AM<br>
<b>To:</b> ofw@lists.openfabrics.org<br>
<b>Subject:</b> [ofw] [PATCH] mtcr<o:p></o:p></p>
</div>
</div>
<p class=MsoNormal><o:p> </o:p></p>
<div>
<p class=MsoNormal>Hi,<o:p></o:p></p>
</div>
<div>
<p class=MsoNormal> <o:p></o:p></p>
</div>
<div>
<p class=MsoNormal>The following patch adds WA for Hermon chip.<o:p></o:p></p>
</div>
<div>
<p class=MsoNormal> <o:p></o:p></p>
</div>
<p class=MsoNormal><em>Thanks, Reuven.</em><o:p></o:p></p>
<div>
<p class=MsoNormal> <o:p></o:p></p>
</div>
<div>
<p class=MsoNormal>Index: tools/mtcr/user/mtcr.c<o:p></o:p></p>
<p class=MsoNormal>===================================================================<o:p></o:p></p>
<p class=MsoNormal>--- tools/mtcr/user/mtcr.c (revision 1047)<o:p></o:p></p>
<p class=MsoNormal>+++ tools/mtcr/user/mtcr.c (working copy)<o:p></o:p></p>
<p class=MsoNormal>@@ -21,33 +21,82 @@<o:p></o:p></p>
<p class=MsoNormal> #define USB_DEV_NAME
"mtusb-1"<o:p></o:p></p>
<p class=MsoNormal> #define
CLEAR(st)
memset(&(st), 0, sizeof(st))<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>+// HERMON ORDERING WA:<o:p></o:p></p>
<p class=MsoNormal>+#define HERMON_WA_BASE 0xf0384 // SEM BASE ADDR. SEM
0xf0380 is reserved for external tools usage.<o:p></o:p></p>
<p class=MsoNormal>+#define HERMON_WA_SIZE
3 // Size in entries<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>+#define MTCR_DEBUG_ENV "MTCR_DEBUG_LEVEL"<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>-#define MTCR_DEBUG_ENV "MTCR_DEBUG_LEVEL"<o:p></o:p></p>
<p class=MsoNormal>+/* <o:p></o:p></p>
<p class=MsoNormal>+ * DLL global variables <o:p></o:p></p>
<p class=MsoNormal>+ */<o:p></o:p></p>
<p class=MsoNormal>+#pragma data_seg(".sdata")<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+/* Process / thread count */<o:p></o:p></p>
<p class=MsoNormal>+DWORD g_Slots[HERMON_WA_SIZE]; /* 3
slots */<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal> #ifdef DBG<o:p></o:p></p>
<p class=MsoNormal> ULONG g_DebugLevel = DEBUG_LEVEL_MID;<o:p></o:p></p>
<p class=MsoNormal> #else<o:p></o:p></p>
<p class=MsoNormal> ULONG g_DebugLevel = DEBUG_LEVEL_LOW;<o:p></o:p></p>
<p class=MsoNormal> #endif<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>+#pragma data_seg()<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal> //-----------------------------------------------------<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> #define MAX_HCA_NUM 16<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>+// flags in below structure<o:p></o:p></p>
<p class=MsoNormal>+#define FIX_ORDERING_BUG 1<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> typedef struct mfile_ibal_t {<o:p></o:p></p>
<p class=MsoNormal>
mfile s;<o:p></o:p></p>
<p class=MsoNormal> ib_al_handle_t
h_al; <o:p></o:p></p>
<p class=MsoNormal> ib_ca_handle_t h_ca;<o:p></o:p></p>
<p class=MsoNormal>
map_crspace cr_map;<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+ int
bugs;<o:p></o:p></p>
<p class=MsoNormal>+ int
slot_num;<o:p></o:p></p>
<p class=MsoNormal>+ u_int32_t hermon_wa_slot;
/* apply hermon cr write workaround */<o:p></o:p></p>
<p class=MsoNormal>+ int
hermon_wa_last_op_write;<o:p></o:p></p>
<p class=MsoNormal>+ u_int64_t
hermon_wa_max_retries;<o:p></o:p></p>
<p class=MsoNormal>+ u_int64_t
hermon_wa_num_of_writes;<o:p></o:p></p>
<p class=MsoNormal>+ u_int64_t
hermon_wa_num_of_retry_writes;<o:p></o:p></p>
<p class=MsoNormal> } mfile_ibal;<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>+// Return slot_num or -1 when no free slots <o:p></o:p></p>
<p class=MsoNormal>+static int __get_slot()<o:p></o:p></p>
<p class=MsoNormal>+{<o:p></o:p></p>
<p class=MsoNormal>+ int i, prev_val;<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+ for (i = 0; i < HERMON_WA_SIZE;
++i) {<o:p></o:p></p>
<p class=MsoNormal>+
prev_val = InterlockedCompareExchange(<o:p></o:p></p>
<p class=MsoNormal>+
(LONG volatile* )&g_Slots[i], 0, 1 );<o:p></o:p></p>
<p class=MsoNormal>+
if ( prev_val ) <o:p></o:p></p>
<p class=MsoNormal>+
return i;<o:p></o:p></p>
<p class=MsoNormal>+ }<o:p></o:p></p>
<p class=MsoNormal>+ return -1;<o:p></o:p></p>
<p class=MsoNormal>+}<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+static void __put_slot(int slot_num)<o:p></o:p></p>
<p class=MsoNormal>+{<o:p></o:p></p>
<p class=MsoNormal>+ int prev_val;<o:p></o:p></p>
<p class=MsoNormal>+ prev_val = InterlockedExchange(<o:p></o:p></p>
<p class=MsoNormal>+
(LONG volatile* )&g_Slots[slot_num], 1 );<o:p></o:p></p>
<p class=MsoNormal>+ if ( !prev_val ) <o:p></o:p></p>
<p class=MsoNormal>+
DPRINT1(("Wrong semaphore %d value \n", slot_num));<o:p></o:p></p>
<p class=MsoNormal>+ <o:p></o:p></p>
<p class=MsoNormal>+}<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal> BOOL APIENTRY DllMain( HANDLE hModule,<o:p></o:p></p>
<p class=MsoNormal>
DWORD ul_reason_for_call,<o:p></o:p></p>
<p class=MsoNormal>
LPVOID lpReserved<o:p></o:p></p>
<p class=MsoNormal>
)<o:p></o:p></p>
<p class=MsoNormal> {<o:p></o:p></p>
<p class=MsoNormal>+ int i;<o:p></o:p></p>
<p class=MsoNormal> char* pszDbgLevel;<o:p></o:p></p>
<p class=MsoNormal> switch (ul_reason_for_call)<o:p></o:p></p>
<p class=MsoNormal> {<o:p></o:p></p>
<p class=MsoNormal>@@ -59,6 +108,9 @@<o:p></o:p></p>
<p class=MsoNormal> if
(pszDbgLevel) {<o:p></o:p></p>
<p class=MsoNormal>
g_DebugLevel = atol(pszDbgLevel);<o:p></o:p></p>
<p class=MsoNormal> }<o:p></o:p></p>
<p class=MsoNormal>+
// set slot data<o:p></o:p></p>
<p class=MsoNormal>+
for (i = 0; i < HERMON_WA_SIZE; ++i)<o:p></o:p></p>
<p class=MsoNormal>+
g_Slots[i] = 1;<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> break;<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>@@ -85,13 +137,20 @@<o:p></o:p></p>
<p class=MsoNormal> #define
SINAI_4X_CONF_DEV_ID
24205<o:p></o:p></p>
<p class=MsoNormal> #define
SINAI_8X_DEV_ID
25204<o:p></o:p></p>
<p class=MsoNormal> #define SINAI_8X_CONF_DEV_ID
25205<o:p></o:p></p>
<p class=MsoNormal>+#define
HERMON_SDR_DEV_ID
25408<o:p></o:p></p>
<p class=MsoNormal>+#define
HERMON_DDR_DEV_ID
25418<o:p></o:p></p>
<p class=MsoNormal>+#define
HERMON_QDR_DEV_ID
25428<o:p></o:p></p>
<p class=MsoNormal>+#define HERMON_DDR_PCI5_DEV_ID
26418<o:p></o:p></p>
<p class=MsoNormal>+#define
HERMON_QDR_PCI5_DEV_ID
26428<o:p></o:p></p>
<p class=MsoNormal>+#define
HERMON_CONF_DEV_ID
401<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> #define IS_CONF_DEV(dev_id) \<o:p></o:p></p>
<p class=MsoNormal>- ((dev_id ==
TAVOR_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>- (dev_id ==
ARBEL_TM_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>- (dev_id ==
ARBEL_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>- (dev_id ==
SINAI_4X_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>- (dev_id ==
SINAI_8X_CONF_DEV_ID))<o:p></o:p></p>
<p class=MsoNormal>+
((dev_id == TAVOR_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == ARBEL_TM_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == ARBEL_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == SINAI_4X_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == SINAI_8X_CONF_DEV_ID) || \<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == HERMON_CONF_DEV_ID))<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> #define MAX_DEV_NAME
32<o:p></o:p></p>
<p class=MsoNormal> typedef struct {<o:p></o:p></p>
<p class=MsoNormal>@@ -115,7 +174,15 @@<o:p></o:p></p>
<p class=MsoNormal>
{
SINAI_4X_DEV_ID,
"InfiniHost_III_Lx",
MDEVS_TAVOR },<o:p></o:p></p>
<p class=MsoNormal>
{ SINAI_4X_CONF_DEV_ID,
"InfiniHostBd",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>
{ SINAI_8X_DEV_ID,
"InfiniHost_III_Lx",
MDEVS_TAVOR },<o:p></o:p></p>
<p class=MsoNormal>-
{ SINAI_8X_CONF_DEV_ID,
"InfiniHostBd",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>+
{ SINAI_8X_CONF_DEV_ID,
"InfiniHostBd",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+
{ HERMON_SDR_DEV_ID,
"ConnectX",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>+
{ HERMON_DDR_DEV_ID,
"ConnectX",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>+
{ HERMON_QDR_DEV_ID,
"ConnectX",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>+
{ HERMON_DDR_PCI5_DEV_ID, "ConnectX",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>+
{ HERMON_QDR_PCI5_DEV_ID, "ConnectX",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal>+
<o:p></o:p></p>
<p class=MsoNormal>+
{ HERMON_CONF_DEV_ID, "ConnectXBd",
MDEVS_TAVOR_CR },<o:p></o:p></p>
<p class=MsoNormal> };<o:p></o:p></p>
<p class=MsoNormal> #define DEVICE_DB_SIZE (sizeof(db) /
sizeof(DEVICE_DB_T))<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>@@ -123,6 +190,14 @@<o:p></o:p></p>
<p class=MsoNormal> char *dsuffix[] = { "conf", "_cr",
"_uar", "_ddr"};<o:p></o:p></p>
<p class=MsoNormal> #define MASKS_SIZE
(sizeof(dmasks) / sizeof(Mdevs))<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>+static int is_hermon(USHORT dev_id)<o:p></o:p></p>
<p class=MsoNormal>+{<o:p></o:p></p>
<p class=MsoNormal>+ return (dev_id ==
HERMON_SDR_DEV_ID) ||<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == HERMON_DDR_DEV_ID) ||<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == HERMON_QDR_DEV_ID) ||<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == HERMON_DDR_PCI5_DEV_ID) ||<o:p></o:p></p>
<p class=MsoNormal>+
(dev_id == HERMON_QDR_PCI5_DEV_ID);<o:p></o:p></p>
<p class=MsoNormal>+}<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> // Return: < 0 - Error. > 0 -
Numbern of characters written (including last '\0')<o:p></o:p></p>
<p class=MsoNormal> int create_mst_names_by_dev_id(USHORT dev_id, int
dev_ix, int mask, char *name, int name_len, int *cnt)<o:p></o:p></p>
<p class=MsoNormal>@@ -431,8 +506,70 @@<o:p></o:p></p>
<p class=MsoNormal> }<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal> //<o:p></o:p></p>
<p class=MsoNormal>+// Hermon PCI ordering bug work around (in kernel):<o:p></o:p></p>
<p class=MsoNormal> //<o:p></o:p></p>
<p class=MsoNormal>+// Toggle bit is done using a HW semaphore. 3 slots (sems)
are allocated for MST tools and<o:p></o:p></p>
<p class=MsoNormal>+// are dynamically allocated by the mst_pci.o module. 1
slot is reserved for external tools usage.<o:p></o:p></p>
<p class=MsoNormal>+// This means to more than 3 tools that use the PCI dev can
run simultaniously.<o:p></o:p></p>
<p class=MsoNormal>+// <o:p></o:p></p>
<p class=MsoNormal>+// Open:<o:p></o:p></p>
<p class=MsoNormal>+// If the wa is enabled
("MTCR_HERMON_WA" env variable does NOT exist or exist and equals 1):<o:p></o:p></p>
<p class=MsoNormal>+// and HERMON-A0 dev id is read:<o:p></o:p></p>
<p class=MsoNormal>+// get a vacant slot - ioctl( , PCI_HERMON_WA
,);<o:p></o:p></p>
<p class=MsoNormal>+// read the sem in the slot (to lock it).<o:p></o:p></p>
<p class=MsoNormal>+//<o:p></o:p></p>
<p class=MsoNormal>+//<o:p></o:p></p>
<p class=MsoNormal>+// Flush (hermon_wa_write_confirm_sem):<o:p></o:p></p>
<p class=MsoNormal>+// If enabled on first read after write:<o:p></o:p></p>
<p class=MsoNormal>+// write 0 to sem.<o:p></o:p></p>
<p class=MsoNormal>+// read sem untlill sem = 0;<o:p></o:p></p>
<p class=MsoNormal>+//<o:p></o:p></p>
<p class=MsoNormal>+// Close/release<o:p></o:p></p>
<p class=MsoNormal>+// Zero the slot.<o:p></o:p></p>
<p class=MsoNormal>+//<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+int hermon_wa_write_confirm_sem(mfile* mf, u_int32_t addr)
{<o:p></o:p></p>
<p class=MsoNormal>+ u_int64_t max_retries = 0x1000000;<o:p></o:p></p>
<p class=MsoNormal>+ u_int64_t retries = 0;<o:p></o:p></p>
<p class=MsoNormal>+ mfile_ibal *mfi = (mfile_ibal *)mf;<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+ mfi->hermon_wa_num_of_writes++;<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+ // clear sem<o:p></o:p></p>
<p class=MsoNormal>+ *((u_int32_t *)((char *)mf->ptr +
mfi->hermon_wa_slot)) = 0;<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+ while (retries < max_retries) {<o:p></o:p></p>
<p class=MsoNormal>+ u_int32_t
slot_value ;<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+ slot_value
= __be32_to_cpu(*((volatile u_int32_t *)((char *)mf->ptr +
mfi->hermon_wa_slot)));<o:p></o:p></p>
<p class=MsoNormal>+ if (slot_value
== 0) {<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+
// Good - The written value was read<o:p></o:p></p>
<p class=MsoNormal>+
if (retries) {<o:p></o:p></p>
<p class=MsoNormal>+
// NOT REALLY NEEDED - just to collect statistics<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+
// printf("-D- Hermon WA addr %06x took %d retries\n", addr,
retries);<o:p></o:p></p>
<p class=MsoNormal>+
mfi->hermon_wa_num_of_retry_writes++;<o:p></o:p></p>
<p class=MsoNormal>+
if (retries > mfi->hermon_wa_max_retries) {<o:p></o:p></p>
<p class=MsoNormal>+
mfi->hermon_wa_max_retries = retries;<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+
return 4;<o:p></o:p></p>
<p class=MsoNormal>+ } else {<o:p></o:p></p>
<p class=MsoNormal>+
// sem is still locked from previous read - read passed the write<o:p></o:p></p>
<p class=MsoNormal>+
retries++;<o:p></o:p></p>
<p class=MsoNormal>+ }<o:p></o:p></p>
<p class=MsoNormal>+ }<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+ DPRINT1(("-D- Hermon WA addr
%06x failed after %ld retries\n", addr, retries));<o:p></o:p></p>
<p class=MsoNormal>+ return 0;<o:p></o:p></p>
<p class=MsoNormal>+} <o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+//<o:p></o:p></p>
<p class=MsoNormal>+//<o:p></o:p></p>
<p class=MsoNormal> // List devices in their MST compatible names.<o:p></o:p></p>
<p class=MsoNormal> // Each device type is indexed sepetrately.<o:p></o:p></p>
<p class=MsoNormal> //<o:p></o:p></p>
<p class=MsoNormal>@@ -629,7 +766,7 @@<o:p></o:p></p>
<p class=MsoNormal>
}<o:p></o:p></p>
<p class=MsoNormal> } else {<o:p></o:p></p>
<p class=MsoNormal>
<o:p></o:p></p>
<p class=MsoNormal>-
int bar_num;<o:p></o:p></p>
<p class=MsoNormal>+
int bar_num, slot_num;<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>
// Type of file <o:p></o:p></p>
<p class=MsoNormal>
mf->s.tp = MST_PCI;<o:p></o:p></p>
<p class=MsoNormal>@@ -649,8 +786,36 @@<o:p></o:p></p>
<p class=MsoNormal>
}<o:p></o:p></p>
<p class=MsoNormal> <o:p></o:p></p>
<p class=MsoNormal>
mf->s.ptr = (void*)(ULONG_PTR)mf->cr_map.va;<o:p></o:p></p>
<p class=MsoNormal>- }<o:p></o:p></p>
<p class=MsoNormal>-
<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+
// check whether we need to perform the workaround<o:p></o:p></p>
<p class=MsoNormal>+
if (is_hermon(dev_id)) {<o:p></o:p></p>
<p class=MsoNormal>+
char* hermon_wa_env = getenv("MTCR_HERMON_WA");<o:p></o:p></p>
<p class=MsoNormal>+
// if there is no env variable or it =
"0" - we perform the workaround<o:p></o:p></p>
<p class=MsoNormal>+
if (hermon_wa_env == NULL || strcmp(hermon_wa_env, "0")) {<o:p></o:p></p>
<p class=MsoNormal>+
// perform the workaround only for A0 revision<o:p></o:p></p>
<p class=MsoNormal>+
if (access_type == MDEVS_TAVOR_CR) {<o:p></o:p></p>
<p class=MsoNormal>+
u_int32_t rev = 0;<o:p></o:p></p>
<p class=MsoNormal>+
mread4((mfile*)mf, 0xf0014, &rev);<o:p></o:p></p>
<p class=MsoNormal>+
if (rev == 0xa00190) { // TODO: Should I ignore REV here ?<o:p></o:p></p>
<p class=MsoNormal>+
slot_num = __get_slot();<o:p></o:p></p>
<p class=MsoNormal>+
if (slot_num < 0) // no free slot <o:p></o:p></p>
<p class=MsoNormal>+
goto ErrExit;<o:p></o:p></p>
<p class=MsoNormal>+
mf->bugs |= FIX_ORDERING_BUG;<o:p></o:p></p>
<p class=MsoNormal>+
mf->slot_num = slot_num;<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+
<o:p></o:p></p>
<p class=MsoNormal>+
// prepare for the workaround<o:p></o:p></p>
<p class=MsoNormal>+
if (mf->bugs & FIX_ORDERING_BUG) { // Hermon WA setup<o:p></o:p></p>
<p class=MsoNormal>+
DPRINT1(("-D- Hermon WA setup\n"));<o:p></o:p></p>
<p class=MsoNormal>+
mf->hermon_wa_slot = HERMON_WA_BASE + 4*slot_num;<o:p></o:p></p>
<p class=MsoNormal>+
hermon_wa_write_confirm_sem((mfile*)mf, mf->hermon_wa_slot);<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+
<o:p></o:p></p>
<p class=MsoNormal> } else if (dev_id ==
DEVASYS_DEV_ID) {<o:p></o:p></p>
<p class=MsoNormal> // Type of
file <o:p></o:p></p>
<p class=MsoNormal> h =
usb_open();<o:p></o:p></p>
<p class=MsoNormal>@@ -702,6 +867,16 @@<o:p></o:p></p>
<p class=MsoNormal> if
(mf->tp == MST_PCICONF) {<o:p></o:p></p>
<p class=MsoNormal>
ibal_access(mfi->h_ca, 0x0, &stub, 4, FW_CLOSE_IF );<o:p></o:p></p>
<p class=MsoNormal> } else if
(mf->tp = MST_PCI) {<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+
if (mfi->bugs & FIX_ORDERING_BUG) {<o:p></o:p></p>
<p class=MsoNormal>+
__put_slot( mfi->slot_num );<o:p></o:p></p>
<p class=MsoNormal>+
DPRINT1(("-D- Hermon WA stats:\n"));<o:p></o:p></p>
<p class=MsoNormal>+
DPRINT1(("-D- : num of write flushes: %8ld\n",
mfi->hermon_wa_num_of_writes));<o:p></o:p></p>
<p class=MsoNormal>+
DPRINT1(("-D- : num of retry flushes: %8ld\n",
mfi->hermon_wa_num_of_retry_writes));<o:p></o:p></p>
<p class=MsoNormal>+
DPRINT1(("-D- :
max_retries:
%8ld\n", mfi->hermon_wa_max_retries));<o:p></o:p></p>
<p class=MsoNormal>+
}<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>+<o:p></o:p></p>
<p class=MsoNormal>
if (mfi->cr_map.size) {<o:p></o:p></p>
<p class=MsoNormal>
<o:p></o:p></p>
<p class=MsoNormal>
if (ibal_access(mfi->h_ca, 0x0, NULL, 0, FW_UNMAP_CRSPACE ) != IB_SUCCESS) {<o:p></o:p></p>
<p class=MsoNormal><o:p> </o:p></p>
<p class=MsoNormal><o:p> </o:p></p>
</div>
</div>
</body>
</html>