翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

# Amazon SageMaker HyperPod タスクガバナンスでのギャングスケジューリングの使用
<a name="sagemaker-hyperpod-eks-operate-console-ui-governance-tasks-gang-scheduling"></a>

分散 ML トレーニングでは、ジョブで複数のポッドがノード間で同時に実行され、pod-to-pod通信が必要になることがよくあります。HyperPod タスクガバナンスは、Kueue `waitForPodsReady`の機能を使用してギャングスケジューリングを実装します。有効にすると、すべてのポッドの準備ができるまで、ワークロードは Kueue によってモニタリングされます。つまり、スケジュール、実行、オプションの準備状況プローブに合格します。ワークロードのすべてのポッドが設定されたタイムアウト内に準備ができていない場合、ワークロードは削除され、再キューに入れられます。

ギャングスケジューリングには以下の利点があります。
+ **リソースの浪費を防止** — すべてのポッドの準備が整っていない場合、Kueue はワークロードを削除して再キューに入れ、部分的に実行されているワークロードによってリソースが無期限に保持されないようにします。
+ **デッドロックを回避 —** ジョブが部分的なリソースを保持し、互いに無期限にブロックするのを防ぎます。
+ **自動復旧** — ポッドがタイムアウト内に準備ができていない場合、ワークロードは無期限にハングアップするのではなく、設定可能なエクスポネンシャルバックオフで削除および再キューに入れられます。

## ギャングスケジューリングをアクティブ化する
<a name="sagemaker-hyperpod-eks-operate-console-ui-governance-tasks-gang-scheduling-activate"></a>

ギャングスケジューリングを有効にするには、タスクガバナンス Amazon EKS アドオンがインストールされた HyperPod Amazon EKS クラスターが必要です。アドオンのステータスは `Active`または である必要があります`Degraded`。

**注記**  
ギャングスケジューリングは、クラスターの Kueue 設定を編集`kubectl`することで、 を使用して直接設定することもできます。

**ギャングスケジューリングを有効にする (SageMaker AI コンソール)**

1. [Amazon SageMaker AI コンソール](https://console.aws.amazon.com/sagemaker/)を開き、HyperPod クラスターに移動します。

1. **ポリシー管理**タブを選択します。

1. **「タスクガバナンス**」セクションで**「アクション**」を開き、**「ギャングスケジューリングの設定**」を選択します。

1. ギャングスケジューリングをオンに切り替えて設定を行います。

1. **[保存]** を選択します。Kueue コントローラーが再起動して変更を適用します。

## ギャングスケジューリング設定
<a name="sagemaker-hyperpod-eks-operate-console-ui-governance-tasks-gang-scheduling-settings"></a>

次の表に、ギャングスケジューリングの設定を示します。


| 設定 | 説明 | デフォルト | 
| --- | --- | --- | 
| timeout | ワークロードを削除して再キューイングする前に、すべてのポッドの準備が完了するまで Kueue が待機する時間。 | 5m | 
| recoveryTimeout | ノード障害後に Kueue がポッドの復旧を待ってからワークロードを再キューに入れる時間。を に設定0sして無効にします。設定timeoutされていない場合は、デフォルトで の値になります。 | 5m | 
| blockAdmission | 有効にすると、ワークロードは順番に許可されます。現在のポッドのすべてのポッドの準備ができるまで、新しいワークロードは許可されません。リソースに制約のあるクラスターのデッドロックを防止します。 | オフ | 
| requeuingStrategy timestamp | 再キューの順序で Creation (元の送信時間、キューの位置を保持) と Eviction (最後の削除時間、繰り返し失敗するジョブの優先度を効果的に解除) のどちらを使用するか。 | エビクション | 
| requeuingStrategy backoffLimitCount | Kueue がワークロードを完全に非アクティブ化するまでの最大再キュー試行回数。無制限の再試行には空のままにします。 | 無制限 | 
| requeuingStrategy backoffBaseSeconds | 連続するタイムアウトのたびにワークロードを再キューに入れるときのエクスポネンシャルバックオフのベース時間を秒単位で表します。指数は 2 です。 | 60 秒 | 
| requeuingStrategy backoffMaxSeconds | 指数バックオフ遅延の上限。に達すると、Kueue はこの固定間隔で再キューイングを続行します。 | 3600 秒 | 

**注記**  
ギャングスケジューリング設定を変更すると、Kueue コントローラーが再起動され、ジョブの受け入れが一時的に遅延する可能性があります。これは、値を有効化、無効化、または更新する場合に適用されます。実行中のジョブは中断されません。

**注記**  
ギャングスケジューリングはクラスター全体で行われます。これは、特定のチームやキューだけでなく、クラスター上のすべての Kueue マネージドワークロードに適用されます。