EFA クライアントの設定

Lustre クライアントと EFA ドライバーをすばやくインストールするには

1. インストールスクリプトを含む ファイルをダウンロードして解凍します。

   curl -O https://docs.aws.amazon.com/fsx/latest/LustreGuide/samples/install-fsx-lustre-client.zip
   unzip install-fsx-lustre-client.zip

2. install-fsx-lustre-client フォルダに変更し、インストールスクリプトを実行します。

   cd install-fsx-lustre-client
   sudo ./bin/install-fsx-lustre-client.sh --install-lustre --install-efa

   スクリプトは以下を自動的に実行します:

   • Lustre クライアントをインストールします

   • EFA ドライバーをインストールします

   • Lustre クライアントと EFA ドライバーのインストールを検証します

   install-fsx-lustre-client.sh スクリプトで使用できるオプションと使用例のリストについては、zip ファイルの README.md ファイルを参照してください。

クライアントインスタンスに NVIDIA GPUDirect Storage ドライバーをインストールするには

1. NVIDIA GDS リポジトリのクローンを作成します:

   git clone https://github.com/NVIDIA/gds-nvidia-fs.git

2. ドライバーをビルドしてインストールします:

   cd gds-nvidia-fs/src/
   export NVFS_MAX_PEER_DEVS=128
   export NVFS_MAX_PCI_DEPTH=16
   sudo -E make
   sudo insmod nvidia-fs.ko

Lustre クライアントをすばやく設定するには

1. Amazon EC2 インスタンスに接続します。

2. 設定スクリプトを含むファイルをダウンロードして解凍します:

   curl -O https://docs.aws.amazon.com/fsx/latest/LustreGuide/samples/configure-efa-fsx-lustre-client.zip
   unzip configure-efa-fsx-lustre-client.zip

3. configure-efa-fsx-lustre-client フォルダに変更し、セットアップスクリプトを実行します:

   cd configure-efa-fsx-lustre-client
   # for regular IO
   sudo ./setup.sh
   
   # for NVIDIA GPUDirect Storage (GDS) IO
   sudo ./setup.sh --optimized-for-gds
   

   スクリプトは以下を自動的に実行します:

   • Lustre モジュールをインポートする

   • TCP および EFA インターフェイスを設定する

   • 再起動時に自動設定用の systemd サービスを作成する

   setup.sh スクリプトで使用できるオプションと使用例のリストについては、zip ファイルの README.md ファイルを参照してください。

1. 使用可能な EFA インターフェイスを表示します。

   for interface in /sys/class/infiniband/*; do
       if [ ! -e "$interface/device/driver" ]; then continue; fi
       driver=$(basename "$(realpath "$interface/device/driver")")
       if [ "$driver" != "efa" ]; then continue; fi
       echo $(basename $interface)
   done

2. 現在設定されているインターフェイスを表示します:

   sudo lnetctl net show

3. EFA インターフェイスを追加します:

   sudo lnetctl net add --net efa --if device_name --peer-credits 32

   device_name をステップ 1 のリストから実際のデバイス名に置き換えます。

4. EFA インターフェイスを削除します:

   sudo lnetctl net del --net efa --if device_name

   device_name をステップ 2 のリストから実際のデバイス名に置き換えます。