User Manual
Table Of Contents
- Mellanox WinOF VPI User Manual
- Table of Contents
- List of Tables
- Document Revision History
- About this Manual
- 1 Introduction
- 2 Firmware Upgrade
- 3 Driver Features
- 3.1 Hyper-V with VMQ
- 3.2 Header Data Split
- 3.3 Receive Side Scaling (RSS)
- 3.4 Port Configuration
- 3.5 Load Balancing, Fail-Over (LBFO) and VLAN
- 3.6 Ports TX Arbitration
- 3.7 RDMA over Converged Ethernet (RoCE)
- 3.8 Network Virtualization using Generic Routing Encapsulation
- 3.9 Differentiated Services Code Point (DSCP)
- 4 Deploying Windows Server 2012 and Above with SMB Direct
- 5 Driver Configuration
- 6 Performance Tuning
- 7 OpenSM - Subnet Manager
- 8 InfiniBand Fabric
- 8.1 Network Direct Interface
- 8.2 part_man - Virtual IPoIB Port Creation Utility
- 8.3 InfiniBand Fabric Diagnostic Utilities
- 8.3.1 Utilities Usage
- 8.3.2 ibdiagnet
- 8.3.3 ibportstate
- 8.3.4 ibroute
- 8.3.5 ibdump
- 8.3.6 smpquery
- 8.3.7 perfquery
- 8.3.8 ibping
- 8.3.9 ibnetdiscover
- 8.3.10 ibtracert
- 8.3.11 sminfo
- 8.3.12 ibclearerrors
- 8.3.13 ibstat
- 8.3.14 vstat
- 8.3.15 osmtest
- 8.3.16 ibaddr
- 8.3.17 ibcacheedit
- 8.3.18 iblinkinfo
- 8.3.19 ibqueryerrors
- 8.3.20 ibsysstat
- 8.3.21 saquery
- 8.3.22 smpdump
- 8.4 InfiniBand Fabric Performance Utilities
- 8.4.1 ib_read_bw
- 8.4.2 ib_read_lat
- 8.4.3 ib_send_bw
- 8.4.4 ib_send_lat
- 8.4.5 ib_write_bw
- 8.4.6 ib_write_lat
- 8.4.7 ibv_read_bw
- 8.4.8 ibv_read_lat
- 8.4.9 ibv_send_bw
- 8.4.10 ibv_send_lat
- 8.4.11 ibv_write_bw
- 8.4.12 ibv_write_lat
- 8.4.13 nd_write_bw
- 8.4.14 nd_write_lat
- 8.4.15 nd_read_bw
- 8.4.16 nd_read_lat
- 8.4.17 nd_send_bw
- 8.4.18 nd_send_lat
- 8.4.19 NTttcp
- 9 Software Development Kit
- 10 Troubleshooting
- 11 Documentation
- Appendix A: Windows MPI (MS-MPI)
- Appendix B: NVGRE Configuration Scrips Examples
Rev 4.60
Mellanox Technologies
6
List of Tables
Table 1 Document Revision History . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8
Table 2 Documentation Conventions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11
Table 3 Abbreviations and Acronyms . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12
Table 4 Registry Keys Setting . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17
Table 5 DSCP Registry Keys Settings . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36
Table 6 DSCP Default Registry Keys Settings . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36
Table 7 Mellanox Adapter Traffic Counters . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 55
Table 8 Mellanox Adapter Diagnostics Counters . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 56
Table 9 Mellanox QoS Counters . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 58
Table 10 ibdiagnet Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 63
Table 11 ibdiagnet Output Files . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64
Table 12 ibportstate Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65
Table 13 ibroute Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68
Table 14 ibdump Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 71
Table 15 smpquery Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 72
Table 16 perfquery Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 75
Table 17 ibping Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78
Table 18 ibnetdiscover Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 79
Table 19 ibtracert Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83
Table 20 sminfo Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 85
Table 21 ibclearerrors Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 86
Table 22 ibstat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 86
Table 23 vstat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 87
Table 24 osmtest Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 88
Table 25 ibaddr Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 90
Table 26 ibcacheedit Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 92
Table 27 iblinkinfo Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93
Table 28 ibqueryerrors Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94
Table 29 ibsysstat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 96
Table 30 saquery Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 99
Table 31 smpdump Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
Table 32 ib_read_bw Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 102
Table 33 ib_read_lat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 103
Table 34 ib_send_bw Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104
Table 35 ib_send_lat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 105
Table 36 ib_write_bw Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 106
Table 37 ib_write_lat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
Table 38 ibv_read_bw Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 108
Table 39 ibv_read_lat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 109
Table 40 ibv_send_bw Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 110
Table 41 ibv_send_lat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 112
Table 42 ibv_write_bw Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 113
Table 43 ibv_write_lat Flags and Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 115