As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Atualize sua versão da AMI em seu SageMaker HyperPod cluster

Amazon SageMaker HyperPod Amazon Machine Images (AMIs) são imagens de máquina especializadas para cargas de trabalho distribuídas de aprendizado de máquina e computação de alto desempenho. Cada AMI vem pré-carregada com drivers, frameworks de machine learning, bibliotecas de treinamento e ferramentas de monitoramento de desempenho. Ao atualizar a versão da AMI no cluster, você pode usar as versões mais recentes desses componentes e pacotes para suas tarefas de treinamento e fluxos de trabalho.

Ao atualizar a versão da AMI no cluster, você tem a opção de processar a atualização imediatamente, agendar uma atualização única ou usar uma expressão cron para criar uma programação recorrente. Você também pode optar por atualizar todas as instâncias em um grupo de instâncias ou apenas lotes de instâncias. Se você optar por atualizar os lotes, defina a porcentagem ou a quantidade de instâncias que a SageMaker IA deve atualizar por vez. Se você usar esse método de atualização, definirá um intervalo de quanto tempo a SageMaker IA deve esperar entre os lotes.

Se você optar por atualizar em lote, também poderá incluir uma lista de alarmes e métricas. Durante o intervalo de espera, a SageMaker IA observa essas métricas e, se alguma exceder seu limite, o alarme correspondente entra no estado ALARM e a SageMaker IA reverte a atualização da AMI. Para utilizar reversões automáticas, o perfil de execução do IAM deve ter a permissão cloudwatch:DescribeAlarms.

Para obter mais informações sobre cada versão da AMI para seu HyperPod cluster, consulteAmazon SageMaker HyperPod AMI. Para obter mais informações sobre HyperPod versões gerais, consulteNotas SageMaker HyperPod de lançamento da Amazon.

Você pode usar a API de SageMaker IA ou as operações da CLI para atualizar seu cluster ou ver atualizações programadas para um cluster específico. Se você estiver usando o AWS console, siga estas etapas:

Para criar e gerenciar cronogramas de atualização de forma programática, use as seguintes operações de API:

Permissões obrigatórias

Dependendo de como você configurou seu Pod Disruption Budget em seu cluster Amazon HyperPod EKS, remove pods, libera nós e impede qualquer programação de atualização durante o processo de atualização da AMI. Se alguma restrição dentro do orçamento for violada, HyperPod ignore esse nó durante a atualização da AMI. SageMaker HyperPod Para remover corretamente os pods, você deve adicionar as permissões necessárias à função vinculada ao HyperPod serviço. O arquivo yaml a seguir tem as permissões necessárias.

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: hyperpod-patching
rules:
- apiGroups: [""]
  resources: ["pods"]
  verbs: ["list"]
- apiGroups: [""]
  resources: ["pods/eviction"]
  verbs: ["create"]
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: hyperpod-patching
subjects:
- kind: User
  name: hyperpod-service-linked-role
roleRef:
  kind: ClusterRole
  name: hyperpod-patching
  apiGroup: rbac.authorization.k8s.io

Use os comandos a seguir para aplicar as permissões.

git clone https://github.com/aws/sagemaker-hyperpod-cli.git 

cd sagemaker-hyperpod-cli/helm_chart

helm upgrade hyperpod-dependencies HyperPodHelmChart --namespace kube-system --install

Expressão cron

Para configurar uma atualização única em um determinado horário ou uma programação recorrente, use expressões cron. As expressões cron permitem três campos e são separadas por um espaço em branco. Todos os campos são obrigatórios.

cron(Minutes Hours Day-of-month Month Day-of-week Year)

É possível usar o expressões cron nos seguintes cenários: