Product specifications

Fast Fabric Users Guide
D000006-000 Rev. A Page v
Q
Section 1 Introduction
1.1 Intended Audience . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1-1
1.2 License Agreements . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1-1
1.3 Technical Support. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1-2
1.3.1 Availability . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1-2
1.3.2 Contact Information . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1-2
Section 2 Fast Fabric Overview
2.1 Feature Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2-1
2.2 Fast Fabric Architecture . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2-2
2.2.1 How Fast Fabric Works . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2-3
Section 3 Getting Started
3.1 Design the Fabric . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3-1
3.2 Set Up the Fabric . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3-2
3.3 Using Fast Fabric . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3-4
3.4 Installing and Verifying Firmware on the SilverStorm IB Chassis. . . . . . . 3-6
3.5 Installing and Configuring the Subnet Manager . . . . . . . . . . . . . . . . . . . . 3-9
3.6 Installing and Verifying Firmware on the IB Switches. . . . . . . . . . . . . . . . 3-10
3.7 Installing InfiniBand on the Remaining Servers . . . . . . . . . . . . . . . . . . . . 3-12
3.8 Verifying InfiniBand on the Remaining Servers . . . . . . . . . . . . . . . . . . . . 3-16
3.9 Complete Installation of additional IB Management Nodes . . . . . . . . . . . 3-18
3.10 Configure and Initialize Health Check Tools. . . . . . . . . . . . . . . . . . . . . . . 3-19
3.11 Running HPL . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3-20
3.12 Upgrading IB software . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3-21
Section 4 Fast Fabric TUI Menu
4.1 Host Setup via Fast Fabric . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-3
4.1.1 Edit Configuration and Select/Edit Hosts Files . . . . . . . . . . . . . . . . . . 4-4
4.1.2 Verify Hosts via Ethernet ping . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-4
4.1.3 Verify RSH/RCP Configured . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-4
4.1.4 Setup Password-less SSH/SCP . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-5
4.1.5 Copy /etc/hosts to all hosts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-5
4.1.6 Show uname -a for all hosts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-5
4.1.7 Install/Upgrade QuickSilver Software . . . . . . . . . . . . . . . . . . . . . . . . . 4-5
4.1.8 Configure IPoIB IP Address . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-6
4.1.9 Build MPI Test Apps and Copy to Hosts . . . . . . . . . . . . . . . . . . . . . . . 4-6
4.1.10 Reboot Hosts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-6
4.1.11 Refresh SSH Known Hosts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-6
4.1.12 Rebuild MPI Library and Tools . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-6