infiniband-diags: initial port of linux ib diags
[mirror/winof/.git] / tools / infiniband_diags / src / smpquery.c
1 /*\r
2  * Copyright (c) 2004-2008 Voltaire Inc.  All rights reserved.\r
3  *\r
4  * This software is available to you under a choice of one of two\r
5  * licenses.  You may choose to be licensed under the terms of the GNU\r
6  * General Public License (GPL) Version 2, available from the file\r
7  * COPYING in the main directory of this source tree, or the\r
8  * OpenIB.org BSD license below:\r
9  *\r
10  *     Redistribution and use in source and binary forms, with or\r
11  *     without modification, are permitted provided that the following\r
12  *     conditions are met:\r
13  *\r
14  *      - Redistributions of source code must retain the above\r
15  *        copyright notice, this list of conditions and the following\r
16  *        disclaimer.\r
17  *\r
18  *      - Redistributions in binary form must reproduce the above\r
19  *        copyright notice, this list of conditions and the following\r
20  *        disclaimer in the documentation and/or other materials\r
21  *        provided with the distribution.\r
22  *\r
23  * THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND,\r
24  * EXPRESS OR IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF\r
25  * MERCHANTABILITY, FITNESS FOR A PARTICULAR PURPOSE AND\r
26  * NONINFRINGEMENT. IN NO EVENT SHALL THE AUTHORS OR COPYRIGHT HOLDERS\r
27  * BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER LIABILITY, WHETHER IN AN\r
28  * ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, OUT OF OR IN\r
29  * CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE\r
30  * SOFTWARE.\r
31  *\r
32  */\r
33 \r
34 #if HAVE_CONFIG_H\r
35 #  include <config.h>\r
36 #endif /* HAVE_CONFIG_H */\r
37 \r
38 #include <stdio.h>\r
39 #include <stdlib.h>\r
40 #include <unistd.h>\r
41 #include <stdarg.h>\r
42 #include <time.h>\r
43 #include <string.h>\r
44 #include <getopt.h>\r
45 #include <netinet/in.h>\r
46 \r
47 #define __STDC_FORMAT_MACROS\r
48 #include <inttypes.h>\r
49 \r
50 #include <infiniband/common.h>\r
51 #include <infiniband/umad.h>\r
52 #include <infiniband/mad.h>\r
53 #include <infiniband/complib/cl_nodenamemap.h>\r
54 \r
55 #include "ibdiag_common.h"\r
56 \r
57 #undef DEBUG\r
58 #define DEBUG   if (verbose>1) IBWARN\r
59 \r
60 static int dest_type = IB_DEST_LID;\r
61 static int verbose;\r
62 \r
63 typedef char *(op_fn_t)(ib_portid_t *dest, char **argv, int argc);\r
64 \r
65 typedef struct match_rec {\r
66         char *name;\r
67         op_fn_t *fn;\r
68         unsigned opt_portnum;\r
69 } match_rec_t;\r
70 \r
71 static op_fn_t  node_desc, node_info, port_info, switch_info, pkey_table,\r
72         sl2vl_table, vlarb_table, guid_info;\r
73 \r
74 static const match_rec_t match_tbl[] = {\r
75         { "nodeinfo", node_info },\r
76         { "nodedesc", node_desc },\r
77         { "portinfo", port_info, 1 },\r
78         { "switchinfo", switch_info },\r
79         { "pkeys", pkey_table, 1 },\r
80         { "sl2vl", sl2vl_table, 1 },\r
81         { "vlarb", vlarb_table, 1 },\r
82         { "guids", guid_info },\r
83         {0}\r
84 };\r
85 \r
86 char *argv0 = "smpquery";\r
87 static char *node_name_map_file = NULL;\r
88 static nn_map_t *node_name_map = NULL;\r
89 \r
90 /*******************************************/\r
91 static char *\r
92 node_desc(ib_portid_t *dest, char **argv, int argc)\r
93 {\r
94         int       node_type, l;\r
95         uint64_t  node_guid;\r
96         char      nd[IB_SMP_DATA_SIZE];\r
97         uint8_t   data[IB_SMP_DATA_SIZE];\r
98         char      dots[128];\r
99         char     *nodename = NULL;\r
100 \r
101         if (!smp_query(data, dest, IB_ATTR_NODE_INFO, 0, 0))\r
102                 return "node info query failed";\r
103 \r
104         mad_decode_field(data, IB_NODE_TYPE_F, &node_type);\r
105         mad_decode_field(data, IB_NODE_GUID_F, &node_guid);\r
106 \r
107         if (!smp_query(nd, dest, IB_ATTR_NODE_DESC, 0, 0))\r
108                 return "node desc query failed";\r
109 \r
110         nodename = remap_node_name(node_name_map, node_guid, nd);\r
111 \r
112         l = strlen(nodename);\r
113         if (l < 32) {\r
114                 memset(dots, '.', 32 - l);\r
115                 dots[32 - l] = '\0';\r
116         } else {\r
117                 dots[0] = '.';\r
118                 dots[1] = '\0';\r
119         }\r
120 \r
121         printf("Node Description:%s%s\n", dots, nodename);\r
122         free(nodename);\r
123         return 0;\r
124 }\r
125 \r
126 static char *\r
127 node_info(ib_portid_t *dest, char **argv, int argc)\r
128 {\r
129         char buf[2048];\r
130         char data[IB_SMP_DATA_SIZE];\r
131 \r
132         if (!smp_query(data, dest, IB_ATTR_NODE_INFO, 0, 0))\r
133                 return "node info query failed";\r
134 \r
135         mad_dump_nodeinfo(buf, sizeof buf, data, sizeof data);\r
136 \r
137         printf("# Node info: %s\n%s", portid2str(dest), buf);\r
138         return 0;\r
139 }\r
140 \r
141 static char *\r
142 port_info(ib_portid_t *dest, char **argv, int argc)\r
143 {\r
144         char buf[2048];\r
145         char data[IB_SMP_DATA_SIZE];\r
146         int portnum = 0;\r
147 \r
148         if (argc > 0)\r
149                 portnum = strtol(argv[0], 0, 0);\r
150 \r
151         if (!smp_query(data, dest, IB_ATTR_PORT_INFO, portnum, 0))\r
152                 return "port info query failed";\r
153 \r
154         mad_dump_portinfo(buf, sizeof buf, data, sizeof data);\r
155 \r
156         printf("# Port info: %s port %d\n%s", portid2str(dest), portnum, buf);\r
157         return 0;\r
158 }\r
159 \r
160 static char *\r
161 switch_info(ib_portid_t *dest, char **argv, int argc)\r
162 {\r
163         char buf[2048];\r
164         char data[IB_SMP_DATA_SIZE];\r
165 \r
166         if (!smp_query(data, dest, IB_ATTR_SWITCH_INFO, 0, 0))\r
167                 return "switch info query failed";\r
168 \r
169         mad_dump_switchinfo(buf, sizeof buf, data, sizeof data);\r
170 \r
171         printf("# Switch info: %s\n%s", portid2str(dest), buf);\r
172         return 0;\r
173 }\r
174 \r
175 static char *\r
176 pkey_table(ib_portid_t *dest, char **argv, int argc)\r
177 {\r
178         uint8_t data[IB_SMP_DATA_SIZE];\r
179         uint32_t i, j, k;\r
180         uint16_t *p;\r
181         uint mod;\r
182         int n, t, phy_ports;\r
183         int portnum = 0;\r
184 \r
185         if (argc > 0)\r
186                 portnum = strtol(argv[0], 0, 0);\r
187 \r
188         /* Get the partition capacity */\r
189         if (!smp_query(data, dest, IB_ATTR_NODE_INFO, 0, 0))\r
190                 return "node info query failed";\r
191 \r
192         mad_decode_field(data, IB_NODE_TYPE_F, &t);\r
193         mad_decode_field(data, IB_NODE_NPORTS_F, &phy_ports);\r
194         if (portnum > phy_ports)\r
195                 return "invalid port number";\r
196 \r
197         if ((t == IB_NODE_SWITCH) && (portnum != 0)) {\r
198                 if (!smp_query(data, dest, IB_ATTR_SWITCH_INFO, 0, 0))\r
199                         return "switch info failed";\r
200                 mad_decode_field(data, IB_SW_PARTITION_ENFORCE_CAP_F, &n);\r
201         } else\r
202                 mad_decode_field(data, IB_NODE_PARTITION_CAP_F, &n);\r
203 \r
204         for (i = 0; i < (n + 31) / 32; i++) {\r
205                 mod =  i | (portnum << 16);\r
206                 if (!smp_query(data, dest, IB_ATTR_PKEY_TBL, mod, 0))\r
207                         return "pkey table query failed";\r
208                 if (i + 1 == (n + 31) / 32)\r
209                         k = ((n + 7 - i * 32) / 8) * 8;\r
210                 else\r
211                         k = 32;\r
212                 p = (uint16_t *) data;\r
213                 for (j = 0; j < k; j += 8, p += 8) {\r
214                         printf("%4u: 0x%04x 0x%04x 0x%04x 0x%04x 0x%04x 0x%04x 0x%04x 0x%04x\n",\r
215                                 (i * 32) + j,\r
216                                 ntohs(p[0]), ntohs(p[1]),\r
217                                 ntohs(p[2]), ntohs(p[3]),\r
218                                 ntohs(p[4]), ntohs(p[5]),\r
219                                 ntohs(p[6]), ntohs(p[7]));\r
220                 }\r
221         }\r
222         printf("%d pkeys capacity for this port\n", n);\r
223 \r
224         return 0;\r
225 }\r
226 \r
227 static char *sl2vl_dump_table_entry(ib_portid_t *dest, int in, int out)\r
228 {\r
229         char buf[2048];\r
230         char data[IB_SMP_DATA_SIZE];\r
231         int portnum = (in << 8) | out;\r
232 \r
233         if (!smp_query(data, dest, IB_ATTR_SLVL_TABLE, portnum, 0))\r
234                 return "slvl query failed";\r
235 \r
236         mad_dump_sltovl(buf, sizeof buf, data, sizeof data);\r
237         printf("ports: in %2d, out %2d: ", in, out);\r
238         printf("%s", buf);\r
239         return 0;\r
240 }\r
241 \r
242 static char *\r
243 sl2vl_table(ib_portid_t *dest, char **argv, int argc)\r
244 {\r
245         uint8_t data[IB_SMP_DATA_SIZE];\r
246         int type, num_ports, portnum = 0;\r
247         int i;\r
248         char *ret;\r
249 \r
250         if (argc > 0)\r
251                 portnum = strtol(argv[0], 0, 0);\r
252 \r
253         if (!smp_query(data, dest, IB_ATTR_NODE_INFO, 0, 0))\r
254                 return "node info query failed";\r
255 \r
256         mad_decode_field(data, IB_NODE_TYPE_F, &type);\r
257         mad_decode_field(data, IB_NODE_NPORTS_F, &num_ports);\r
258         if (portnum > num_ports)\r
259                 return "invalid port number";\r
260 \r
261         printf("# SL2VL table: %s\n", portid2str(dest));\r
262         printf("#                 SL: |");\r
263         for (i = 0 ; i < 16 ; i++)\r
264                 printf("%2d|", i);\r
265         printf("\n");\r
266 \r
267         if (type != IB_NODE_SWITCH)\r
268                 return sl2vl_dump_table_entry(dest, 0, 0);\r
269 \r
270         for (i = 0 ; i <= num_ports ; i++) {\r
271                 ret = sl2vl_dump_table_entry(dest, i, portnum);\r
272                 if (ret)\r
273                         return ret;\r
274         }\r
275         return 0;\r
276 }\r
277 \r
278 static char *vlarb_dump_table_entry(ib_portid_t *dest, int portnum, int offset, unsigned cap)\r
279 {\r
280         char buf[2048];\r
281         char data[IB_SMP_DATA_SIZE];\r
282 \r
283         if (!smp_query(data, dest, IB_ATTR_VL_ARBITRATION,\r
284                         (offset << 16) | portnum, 0))\r
285                 return "vl arb query failed";\r
286         mad_dump_vlarbitration(buf, sizeof(buf), data, cap * 2);\r
287         printf("%s", buf);\r
288         return 0;\r
289 }\r
290 \r
291 static char *vlarb_dump_table(ib_portid_t *dest, int portnum,\r
292         char *name, int offset, int cap)\r
293 {\r
294         char *ret;\r
295 \r
296         printf("# %s priority VL Arbitration Table:", name);\r
297         ret = vlarb_dump_table_entry(dest, portnum, offset,\r
298                                      cap < 32 ? cap : 32);\r
299         if (!ret && cap > 32)\r
300                 ret = vlarb_dump_table_entry(dest, portnum, offset + 1,\r
301                                              cap - 32);\r
302         return ret;\r
303 }\r
304 \r
305 static char *\r
306 vlarb_table(ib_portid_t *dest, char **argv, int argc)\r
307 {\r
308         uint8_t data[IB_SMP_DATA_SIZE];\r
309         int portnum = 0;\r
310         int type, enhsp0, lowcap, highcap;\r
311         char *ret = 0;\r
312 \r
313         if (argc > 0)\r
314                 portnum = strtol(argv[0], 0, 0);\r
315 \r
316         /* port number of 0 could mean SP0 or port MAD arrives on */\r
317         if (portnum == 0) {\r
318                 if (!smp_query(data, dest, IB_ATTR_NODE_INFO, 0, 0))\r
319                         return "node info query failed";\r
320 \r
321                 mad_decode_field(data, IB_NODE_TYPE_F, &type);\r
322                 if (type == IB_NODE_SWITCH) {\r
323                         if (!smp_query(data, dest, IB_ATTR_SWITCH_INFO, 0, 0))\r
324                                 return "switch info query failed";\r
325                         mad_decode_field(data, IB_SW_ENHANCED_PORT0_F, &enhsp0);\r
326                         if (!enhsp0) {\r
327                                 printf("# No VLArbitration tables (BSP0): %s port %d\n",\r
328                                         portid2str(dest), 0);\r
329                                 return 0;\r
330                         }\r
331                 }\r
332         }\r
333 \r
334         if (!smp_query(data, dest, IB_ATTR_PORT_INFO, portnum, 0))\r
335                 return "port info query failed";\r
336 \r
337         mad_decode_field(data, IB_PORT_VL_ARBITRATION_LOW_CAP_F, &lowcap);\r
338         mad_decode_field(data, IB_PORT_VL_ARBITRATION_HIGH_CAP_F,&highcap);\r
339 \r
340         printf("# VLArbitration tables: %s port %d LowCap %d HighCap %d\n",\r
341                         portid2str(dest), portnum, lowcap, highcap);\r
342 \r
343         if (lowcap > 0)\r
344                 ret = vlarb_dump_table(dest, portnum, "Low", 1, lowcap);\r
345 \r
346         if (!ret && highcap > 0)\r
347                 ret = vlarb_dump_table(dest, portnum, "High", 3, highcap);\r
348 \r
349         return ret;\r
350 }\r
351 \r
352 static char *\r
353 guid_info(ib_portid_t *dest, char **argv, int argc)\r
354 {\r
355         uint8_t data[IB_SMP_DATA_SIZE];\r
356         uint32_t i, j, k;\r
357         uint64_t *p;\r
358         uint mod;\r
359         int n;\r
360 \r
361         /* Get the guid capacity */\r
362         if (!smp_query(data, dest, IB_ATTR_PORT_INFO, 0, 0))\r
363                 return "port info failed";\r
364         mad_decode_field(data, IB_PORT_GUID_CAP_F, &n);\r
365 \r
366         for (i = 0; i < (n + 7) / 8; i++) {\r
367                 mod =  i;\r
368                 if (!smp_query(data, dest, IB_ATTR_GUID_INFO, mod, 0))\r
369                         return "guid info query failed";\r
370                 if (i + 1 == (n + 7) / 8)\r
371                         k = ((n + 1 - i * 8) / 2) * 2;\r
372                 else\r
373                         k = 8;\r
374                 p = (uint64_t *) data;\r
375                 for (j = 0; j < k; j += 2, p += 2) {\r
376                         printf("%4u: 0x%016"PRIx64" 0x%016"PRIx64"\n",\r
377                                 (i * 8) + j,\r
378                                 ntohll(p[0]), ntohll(p[1]));\r
379                 }\r
380         }\r
381         printf("%d guids capacity for this port\n", n);\r
382 \r
383         return 0;\r
384 }\r
385 \r
386 static op_fn_t *\r
387 match_op(char *name)\r
388 {\r
389         const match_rec_t *r;\r
390         for (r = match_tbl; r->name; r++)\r
391                 if (!strcmp(r->name, name))\r
392                         return r->fn;\r
393         return 0;\r
394 }\r
395 \r
396 static void\r
397 usage(void)\r
398 {\r
399         char *basename;\r
400         const match_rec_t *r;\r
401 \r
402         if (!(basename = strrchr(argv0, '/')))\r
403                 basename = argv0;\r
404         else\r
405                 basename++;\r
406 \r
407         fprintf(stderr, "Usage: %s [-d(ebug) -e(rr_show) -v(erbose) -D(irect) -G(uid) -s smlid -V(ersion) -C ca_name -P ca_port "\r
408                         "-t(imeout) timeout_ms --node-name-map node-name-map] <op> <dest dr_path|lid|guid> [op params]\n",\r
409                         basename);\r
410         fprintf(stderr, "\tsupported ops:\n");\r
411         for (r = match_tbl ; r->name ; r++) {\r
412                 fprintf(stderr, "\t\t%s <addr>%s\n", r->name,\r
413                                 r->opt_portnum ? " [<portnum>]" : "");\r
414         }\r
415         fprintf(stderr, "\n\texamples:\n");\r
416         fprintf(stderr, "\t\t%s portinfo 3 1\t\t\t\t# portinfo by lid, with port modifier\n", basename);\r
417         fprintf(stderr, "\t\t%s -G switchinfo 0x2C9000100D051 1\t# switchinfo by guid\n", basename);\r
418         fprintf(stderr, "\t\t%s -D nodeinfo 0\t\t\t\t# nodeinfo by direct route\n", basename);\r
419         fprintf(stderr, "\t\t%s -c nodeinfo 6 0,12\t\t\t# nodeinfo by combined route\n", basename);\r
420         exit(-1);\r
421 }\r
422 \r
423 int\r
424 main(int argc, char **argv)\r
425 {\r
426         int mgmt_classes[3] = {IB_SMI_CLASS, IB_SMI_DIRECT_CLASS, IB_SA_CLASS};\r
427         ib_portid_t portid = {0};\r
428         ib_portid_t *sm_id = 0, sm_portid = {0};\r
429         extern int ibdebug;\r
430         int timeout = 0, udebug = 0;\r
431         char *ca = 0;\r
432         int ca_port = 0;\r
433         char *err;\r
434         op_fn_t *fn;\r
435 \r
436         static char const str_opts[] = "C:P:t:s:devDcGVhu";\r
437         static const struct option long_opts[] = {\r
438                 { "C", 1, 0, 'C'},\r
439                 { "P", 1, 0, 'P'},\r
440                 { "debug", 0, 0, 'd'},\r
441                 { "err_show", 0, 0, 'e'},\r
442                 { "verbose", 0, 0, 'v'},\r
443                 { "Direct", 0, 0, 'D'},\r
444                 { "combined", 0, 0, 'c'},\r
445                 { "Guid", 0, 0, 'G'},\r
446                 { "smlid", 1, 0, 's'},\r
447                 { "timeout", 1, 0, 't'},\r
448                 { "node-name-map", 1, 0, 1},\r
449                 { "Version", 0, 0, 'V'},\r
450                 { "help", 0, 0, 'h'},\r
451                 { "usage", 0, 0, 'u'},\r
452                 { }\r
453         };\r
454 \r
455         argv0 = argv[0];\r
456 \r
457         while (1) {\r
458                 int ch = getopt_long(argc, argv, str_opts, long_opts, NULL);\r
459                 if ( ch == -1 )\r
460                         break;\r
461                 switch(ch) {\r
462                 case 1:\r
463                         node_name_map_file = strdup(optarg);\r
464                         break;\r
465                 case 'd':\r
466                         ibdebug++;\r
467                         madrpc_show_errors(1);\r
468                         umad_debug(udebug);\r
469                         udebug++;\r
470                         break;\r
471                 case 'e':\r
472                         madrpc_show_errors(1);\r
473                         break;\r
474                 case 'D':\r
475                         dest_type = IB_DEST_DRPATH;\r
476                         break;\r
477                 case 'c':\r
478                         dest_type = IB_DEST_DRSLID;\r
479                         break;\r
480                 case 'G':\r
481                         dest_type = IB_DEST_GUID;\r
482                         break;\r
483                 case 'C':\r
484                         ca = optarg;\r
485                         break;\r
486                 case 'P':\r
487                         ca_port = strtoul(optarg, 0, 0);\r
488                         break;\r
489                 case 's':\r
490                         if (ib_resolve_portid_str(&sm_portid, optarg, IB_DEST_LID, 0) < 0)\r
491                                 IBERROR("can't resolve SM destination port %s", optarg);\r
492                         sm_id = &sm_portid;\r
493                         break;\r
494                 case 't':\r
495                         timeout = strtoul(optarg, 0, 0);\r
496                         madrpc_set_timeout(timeout);\r
497                         break;\r
498                 case 'v':\r
499                         verbose++;\r
500                         break;\r
501                 case 'V':\r
502                         fprintf(stderr, "%s %s\n", argv0, get_build_version() );\r
503                         exit(-1);\r
504                 default:\r
505                         usage();\r
506                         break;\r
507                 }\r
508         }\r
509         argc -= optind;\r
510         argv += optind;\r
511 \r
512         if (argc < 2)\r
513                 usage();\r
514 \r
515         if (!(fn = match_op(argv[0])))\r
516                 IBERROR("operation '%s' not supported", argv[0]);\r
517 \r
518         madrpc_init(ca, ca_port, mgmt_classes, 3);\r
519         node_name_map = open_node_name_map(node_name_map_file);\r
520 \r
521         if (dest_type != IB_DEST_DRSLID) {\r
522                 if (ib_resolve_portid_str(&portid, argv[1], dest_type, sm_id) < 0)\r
523                         IBERROR("can't resolve destination port %s", argv[1]);\r
524                 if ((err = fn(&portid, argv+2, argc-2)))\r
525                         IBERROR("operation %s: %s", argv[0], err);\r
526         } else {\r
527                 char concat[64];\r
528 \r
529                 memset(concat, 0, 64);\r
530                 snprintf(concat, sizeof(concat), "%s %s", argv[1], argv[2]);\r
531                 if (ib_resolve_portid_str(&portid, concat, dest_type, sm_id) < 0)\r
532                         IBERROR("can't resolve destination port %s", concat);\r
533                 if ((err = fn(&portid, argv+3, argc-3)))\r
534                         IBERROR("operation %s: %s", argv[0], err);\r
535         }\r
536         close_node_name_map(node_name_map);\r
537         exit(0);\r
538 }\r