Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Mettez à jour la version de votre AMI dans votre SageMaker HyperPod cluster

Amazon SageMaker HyperPod Amazon Machine Images (AMIs) sont des images de machine spécialisées pour les charges de travail d'apprentissage automatique distribuées et le calcul haute performance. Chaque AMI est préchargée de pilotes, de cadres de machine learning, de bibliothèques d’entraînement et d’outils de surveillance des performances. En mettant à jour la version de l’AMI dans votre cluster, vous pouvez utiliser les dernières versions de ces composants et packages pour vos tâches d’entraînement et vos flux de travail.

Lorsque vous mettez à jour la version de l’AMI au sein de votre cluster, vous avez la possibilité de traiter la mise à jour immédiatement, de planifier une mise à jour unique ou d’utiliser une expression cron pour créer une planification récurrente. Vous pouvez également choisir de mettre à jour toutes les instances d’un groupe d’instances ou uniquement des lots d’instances. Si vous choisissez de mettre à jour des lots, vous définissez le pourcentage ou le nombre d'instances que l' SageMaker IA doit mettre à niveau à la fois. Si vous utilisez cette méthode de mise à jour, vous définissez un intervalle de temps pendant lequel l' SageMaker IA doit attendre entre les lots.

Si vous choisissez de mettre à jour par lots, vous pouvez également inclure une liste d’alarmes et de métriques. Pendant l'intervalle d'attente, l' SageMaker IA observe ces métriques et si certaines dépassent leur seuil, l'alarme correspondante passe à l'état ALARM, et l' SageMaker IA annule la mise à jour de l'AMI. Pour utiliser les annulations automatiques, votre rôle d’exécution IAM doit disposer de l’autorisation cloudwatch:DescribeAlarms.

Pour plus d'informations sur chaque version d'AMI pour votre HyperPod cluster, consultezAmazon SageMaker HyperPod AMI. Pour plus d'informations sur les HyperPod versions générales, consultezNotes de SageMaker HyperPod publication d'Amazon.

Vous pouvez utiliser l'API SageMaker AI ou les opérations de la CLI pour mettre à jour votre cluster ou consulter les mises à jour planifiées pour un cluster spécifique. Si vous utilisez la AWS console, procédez comme suit :

Pour créer et gérer par programmation des planifications de mise à jour, utilisez les opérations d’API suivantes :

Autorisations requises

En fonction de la façon dont vous avez configuré votre budget d'interruption des pods dans votre cluster Amazon EKS, vous HyperPod expulsez les pods, libérez des nœuds et empêchez toute planification de mise à jour pendant le processus de mise à jour de l'AMI. Si l'une des contraintes du budget n'est pas respectée, HyperPod ignore ce nœud lors de la mise à jour de l'AMI. SageMaker HyperPod Pour expulser correctement les pods, vous devez ajouter les autorisations nécessaires au rôle lié au HyperPod service. Le fichier yaml suivant a les autorisations nécessaires.

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: hyperpod-patching
rules:
- apiGroups: [""]
  resources: ["pods"]
  verbs: ["list"]
- apiGroups: [""]
  resources: ["pods/eviction"]
  verbs: ["create"]
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: hyperpod-patching
subjects:
- kind: User
  name: hyperpod-service-linked-role
roleRef:
  kind: ClusterRole
  name: hyperpod-patching
  apiGroup: rbac.authorization.k8s.io

Utilisez les commandes suivantes pour appliquer ces autorisations.

git clone https://github.com/aws/sagemaker-hyperpod-cli.git 

cd sagemaker-hyperpod-cli/helm_chart

helm upgrade hyperpod-dependencies HyperPodHelmChart --namespace kube-system --install

Expressions Cron

Pour configurer une mise à jour ponctuelle à un moment donné ou une planification récurrente, utilisez les expressions cron. Les expressions cron prennent en charge six champs et sont séparées par un espace. Les six champs sont tous requis.

cron(Minutes Hours Day-of-month Month Day-of-week Year)

Vous pouvez utiliser les expressions cron dans les scénarios suivants :