Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Actualice la versión de AMI en su SageMaker HyperPod clúster

SageMaker HyperPod Amazon Machine Images (AMIs) son imágenes de máquinas especializadas para cargas de trabajo de aprendizaje automático distribuidas y computación de alto rendimiento. Cada AMI incluye controladores, marcos de machine learning, bibliotecas de entrenamiento y herramientas de supervisión del rendimiento. Actualice la versión de la AMI en su clúster, puede utilizar las versiones más recientes de estos componentes y paquetes para sus trabajos y flujos de trabajo de entrenamiento.

Al actualizar la versión de la AMI en su clúster, tiene la opción de procesar la actualización inmediatamente, programar una actualización única o utilizar una expresión cron para crear una programación periódica. También puede optar por actualizar todas las instancias de un grupo de instancias o solo los lotes de instancias. Si decide actualizar los lotes, establece el porcentaje o la cantidad de instancias que la SageMaker IA debe actualizar a la vez. Si utilizas este método de actualización, estableces un intervalo de tiempo para que la SageMaker IA espere entre los lotes.

Si decide actualizar por lotes, también puede incluir una lista de alarmas y métricas. Durante el intervalo de espera, la SageMaker IA observa estas métricas y, si alguna supera su umbral, la alarma correspondiente pasa al estado de ALARMA y la SageMaker IA revierte la actualización de la AMI. Para utilizar las reversiones automáticas, su rol de ejecución de IAM debe tener el permiso cloudwatch:DescribeAlarms.

Para obtener más información sobre cada versión de AMI HyperPod del clúster, consulteAmazon SageMaker HyperPod AMI. Para obtener más información sobre las HyperPod versiones generales, consulteNotas de SageMaker HyperPod lanzamiento de Amazon.

Puede usar la API de SageMaker IA o las operaciones de CLI para actualizar el clúster o ver las actualizaciones programadas de un clúster específico. Si utilizas la AWS consola, sigue estos pasos:

Para crear y administrar las programaciones de actualización mediante programación, utilice las siguientes operaciones de API:

Permisos necesarios

En función de cómo haya configurado su presupuesto de interrupción de pods en su clúster de Amazon EKS, HyperPod desaloja los pods, libera nodos e impide cualquier programación de actualizaciones durante el proceso de actualización de la AMI. Si se infringe alguna restricción dentro del presupuesto, HyperPod omite ese nodo durante la actualización de la AMI. SageMaker HyperPod Para desalojar los pods correctamente, debe añadir los permisos necesarios a la función vinculada al HyperPod servicio. El siguiente archivo yaml tiene los permisos necesarios.

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: hyperpod-patching
rules:
- apiGroups: [""]
  resources: ["pods"]
  verbs: ["list"]
- apiGroups: [""]
  resources: ["pods/eviction"]
  verbs: ["create"]
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: hyperpod-patching
subjects:
- kind: User
  name: hyperpod-service-linked-role
roleRef:
  kind: ClusterRole
  name: hyperpod-patching
  apiGroup: rbac.authorization.k8s.io

Utilice los siguientes comandos para aplicar los permisos.

git clone https://github.com/aws/sagemaker-hyperpod-cli.git 

cd sagemaker-hyperpod-cli/helm_chart

helm upgrade hyperpod-dependencies HyperPodHelmChart --namespace kube-system --install

Expresiones cron

Para configurar una actualización única a una hora determinada o de forma periódica, utilice expresiones cron. Las expresiones cron admiten seis campos y están separadas por espacios en blanco. Los seis campos son obligatorios.

cron(Minutes Hours Day-of-month Month Day-of-week Year)

Puede utilizar expresiones cron en los siguientes casos: