Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Aktualisieren Sie Ihre AMI-Version in Ihrem SageMaker HyperPod Cluster

Amazon SageMaker HyperPod Amazon Machine Images (AMIs) sind spezialisierte Maschinenimages für verteilte Workloads für maschinelles Lernen und Hochleistungsrechnen. Auf jedem AMI sind Treiber, Frameworks für maschinelles Lernen, Schulungsbibliotheken und Tools zur Leistungsüberwachung vorinstalliert. Durch die Aktualisierung der AMI-Version in Ihrem Cluster können Sie die neuesten Versionen dieser Komponenten und Pakete für Ihre Trainingsaufgaben und Workflows verwenden.

Wenn Sie die AMI-Version in Ihrem Cluster aktualisieren, haben Sie die Möglichkeit, das Update sofort zu verarbeiten, ein einmaliges Update zu planen oder einen Cron-Ausdruck zu verwenden, um einen wiederkehrenden Zeitplan zu erstellen. Sie können auch wählen, ob Sie alle Instances in einer Instance-Gruppe oder nur Batches von Instances aktualisieren möchten. Wenn Sie Batches aktualisieren möchten, legen Sie den Prozentsatz oder die Anzahl der Instances fest, für die SageMaker KI gleichzeitig ein Upgrade durchführen soll. Wenn Sie diese Aktualisierungsmethode verwenden, legen Sie ein Intervall fest, in dem SageMaker KI zwischen den Batches warten soll.

Wenn Sie sich dafür entscheiden, stapelweise zu aktualisieren, können Sie auch eine Liste mit Alarmen und Messwerten hinzufügen. Während des Wartezeitraums beobachtet SageMaker KI diese Metriken, und wenn sie ihren Schwellenwert überschreiten, geht der entsprechende Alarm in den ALARM-Status über und SageMaker KI macht das AMI-Update rückgängig. Um automatische Rollbacks nutzen zu können, muss Ihre IAM-Ausführungsrolle über die entsprechende Genehmigung cloudwatch:DescribeAlarms verfügen.

Weitere Informationen zu den einzelnen AMI-Versionen für Ihren HyperPod Cluster finden Sie unterSageMaker HyperPod Amazon-AMI. Weitere Informationen zu allgemeinen HyperPod Versionen finden Sie unterSageMaker HyperPod Versionshinweise von Amazon.

Sie können die SageMaker KI-API- oder CLI-Operationen verwenden, um Ihren Cluster zu aktualisieren oder geplante Updates für einen bestimmten Cluster einzusehen. Wenn Sie die AWS Konsole verwenden, gehen Sie wie folgt vor:

Verwenden Sie die folgenden API-Operationen, um Aktualisierungszeitpläne programmgesteuert zu erstellen und zu verwalten:

Erforderliche Berechtigungen

Je nachdem, wie Sie Ihr Pod-Disruption-Budget in Ihrem Amazon EKS-Cluster konfiguriert haben, werden HyperPod Pods entfernt, Knoten freigegeben und jegliche Aktualisierungsplanung während des AMI-Aktualisierungsvorgangs verhindert. Wenn Einschränkungen innerhalb des Budgets verletzt werden, HyperPod überspringt dieser Knoten während des AMI-Updates. SageMaker HyperPod Um Pods korrekt zu entfernen, müssen Sie der dienstverknüpften Rolle die erforderlichen Berechtigungen hinzufügen. HyperPod Die folgende Yaml-Datei verfügt über die erforderlichen Berechtigungen.

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: hyperpod-patching
rules:
- apiGroups: [""]
  resources: ["pods"]
  verbs: ["list"]
- apiGroups: [""]
  resources: ["pods/eviction"]
  verbs: ["create"]
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: hyperpod-patching
subjects:
- kind: User
  name: hyperpod-service-linked-role
roleRef:
  kind: ClusterRole
  name: hyperpod-patching
  apiGroup: rbac.authorization.k8s.io

Verwenden Sie die folgenden Befehle, um die Berechtigungen anzuwenden.

git clone https://github.com/aws/sagemaker-hyperpod-cli.git 

cd sagemaker-hyperpod-cli/helm_chart

helm upgrade hyperpod-dependencies HyperPodHelmChart --namespace kube-system --install

Cron-Ausdrücke

Verwenden Sie Cron-Ausdrücke, um ein einmaliges Update zu einem bestimmten Zeitpunkt oder nach einem wiederkehrenden Zeitplan zu konfigurieren. Cron-Ausdrücke unterstützen sechs Felder und werden durch Leerzeichen getrennt. Es handelt sich um Pflichtfelder.

cron(Minutes Hours Day-of-month Month Day-of-week Year)

Sie können Cron-Ausdrücke für die folgenden Szenarien verwenden: