InfiniBand のネットワークは ファブリック(Fabric) と呼びます。
大まかな構成は以下の通りです。
- HCA
- スイッチ
- サブネットマネージャー
イーサネットと異なりループ構成となっても問題ありません。
以下のようなトポロジー構成が可能です
- Fat Tree
- メッシュ
- 3Dメッシュ
- 2D/3Dトーラス
HCA
いわゆるネットワークカードです。
注意点としては1ホストあたり3ポートまでという規格上の制約があります。
スイッチ
スイッチは8から64ポートのボックス型スイッチから2000ポートを超えるシャーシスイッチまでラインナップされています。
後ほど記載するサブネットマネージャーの機能を有しているものがあります。
サブネットマネージャー
infinibandのネットワークには必ず1つ以上のサブネットマネージャが起動している必要性があります。
サブネットマネージャが起動していないと、HCAのリンクランプが点灯せず通信ができません。
2 台のマシンがスイッチなしで直接接続されている場合でも必要です。