Início SageMaker HyperPod rápido da Amazon

Abra o console Amazon SageMaker AI em https://console.aws.amazon.com/sagemaker/.

Escolha HyperPod Clusters no painel de navegação esquerdo e, em seguida, Gerenciamento de Clusters.

Na página SageMaker HyperPod Clusters, escolha Criar HyperPod cluster.

No menu suspenso Criar HyperPod cluster, escolha Orchestrated by Slurm.

Na página de criação do cluster, escolha Configuração rápida. Com essa opção, você começa imediatamente com as configurações padrão. SageMaker A IA criará novos recursos, como VPC, sub-redes, grupos de segurança, bucket do Amazon S3, função do IAM e FSx para o Lustre no processo de criação do seu cluster.

Em Configurações gerais, especifique um nome para o novo cluster. Não é possível alterar o nome após a criação do cluster.

Em Grupos de instâncias, escolha Adicionar grupo. Cada grupo de instâncias pode ser configurado de forma diferente e você pode criar um cluster heterogêneo que consiste em vários grupos de instâncias com vários tipos de instância. Para implantar um cluster, você deve adicionar ao menos um grupo de instâncias. É possível adicionar um grupo de instâncias por vez. Para criar vários grupos de instâncias, repita o processo para cada grupo de instâncias.

Siga as etapas abaixo para adicionar um grupo de instâncias.

1. Em Tipo de grupos de instâncias escolha um tipo de grupo de instâncias. Para esse início rápido, escolha Controlador (cabeça) para my-controller-group, Login para my-login-group e Computação (processamento) para worker-group-1.

2. Em Nome, especifique um nome para o grupo de instâncias. Para este início rápido, crie três grupos de instâncias chamados my-controller-group, my-login-group e worker-group-1.

3. Em Capacidade da instância, escolha a capacidade sob demanda ou um plano de treinamento para reservar seus recursos de computação.

4. Em Selecionar tipo de instância, escolha a instância para o grupo de instâncias. Para esse início rápido, selecione ml.c5.xlarge para my-controller-group, ml.m5.4xlarge para my-login-group e ml.trn1.32xlarge para worker-group-1.

   Escolha o tipo de instância com cotas suficientes em sua conta ou solicite cotas adicionais seguindo as instruções em SageMaker HyperPod cotas.

5. Em Quantidade de instâncias, especifique um número inteiro que não exceda a cota de instância para uso do cluster. Para este início rápido, insira 1 para todos os três grupos.

6. Na lista Zona de disponibilidade de destino, selecione a zona de disponibilidade onde suas instâncias serão provisionadas. A zona de disponibilidade deve corresponder ao local da sua capacidade de computação acelerada.

7. Em Outros volumes de armazenamento por instância (GB), especifique um número inteiro entre 1 e 16.384 para definir o tamanho de um volume adicional do Elastic Block Store (EBS) em gigabytes (GB). O volume do EBS é anexado a cada instância do grupo de instâncias. O caminho de montagem padrão para o volume adicional do EBS é/opt/sagemaker. Depois que o cluster for criado com sucesso, você poderá entrar por SSH nas instâncias do cluster (nós) e verificar se o volume do EBS está montado corretamente executando o comando df -h. A anexação de um volume adicional do EBS fornece armazenamento estável, fora da instância e com persistência independente, conforme descrito na seção de volumes do Amazon EBS no Guia do usuário do Amazon Elastic Block Store.

8. Escolha Adicionar grupo de instâncias.

Em Padrões de configuração rápida, analise as configurações padrão. Esta seção lista todas as configurações padrão para a criação do cluster, incluindo todos os novos AWS recursos que serão criados durante o processo de criação do cluster.

Selecione Enviar.

Abra o console Amazon SageMaker AI em https://console.aws.amazon.com/sagemaker/.

Escolha HyperPod Clusters no painel de navegação esquerdo e, em seguida, Gerenciamento de Clusters.

Na página SageMaker HyperPod Clusters, escolha Criar HyperPod cluster.

No menu suspenso Criar HyperPod cluster, escolha Orchestrated by Amazon EKS.

Na página de criação de clusters, escolha Configuração rápida. Com essa opção, você pode começar imediatamente com as configurações padrão. SageMaker A IA criará novos recursos, como VPC, sub-redes, grupos de segurança, bucket do Amazon S3, função do IAM e FSx para o Lustre no processo de criação do seu cluster.

Em Configurações gerais, especifique um nome para o novo cluster. Não é possível alterar o nome após a criação do cluster.

Em Grupos de instâncias, escolha Adicionar grupo. Cada grupo de instâncias pode ser configurado de forma diferente e você pode criar um cluster heterogêneo que consiste em vários grupos de instâncias com vários tipos de instância. Para implantar um cluster, você deve adicionar ao menos um grupo de instâncias. É possível adicionar um grupo de instâncias por vez. Para criar vários grupos de instâncias, repita o processo para cada grupo de instâncias.

Siga as etapas abaixo para adicionar um grupo de instâncias.

1. Em Tipo de grupo de instâncias, escolha Padrão ou Grupo de instâncias restritas (RIG). Normalmente, você escolherá Padrão, que oferece um ambiente de computação de uso geral sem restrições adicionais de segurança. O grupo de instâncias restritas (RIG) é um ambiente especializado para personalização de modelos de base, como o Amazon Nova. Para ter mais informações sobre como configurar o RIG para a personalização de modelos do Amazon Nova, consulte Personalização do Amazon Nova na Amazon SageMaker HyperPod.

2. Em Nome, especifique um nome para o grupo de instâncias.

3. Em Capacidade da instância, escolha a capacidade sob demanda ou um plano de treinamento para reservar seus recursos de computação.

4. Em Selecionar tipo de instância, escolha a instância para o grupo de instâncias. Escolha o tipo de instância com cotas suficientes em sua conta ou solicite cotas adicionais seguindo em SageMaker HyperPod cotas.

5. Em Quantidade de instâncias, especifique um número inteiro que não exceda a cota de instância para uso do cluster. Para este início rápido, insira 1 para todos os três grupos.

6. Na lista Zona de disponibilidade de destino, selecione a zona de disponibilidade onde suas instâncias serão provisionadas. A zona de disponibilidade deve corresponder ao local da sua capacidade de computação acelerada.

7. Em Outros volumes de armazenamento por instância (GB), especifique um número inteiro entre 1 e 16.384 para definir o tamanho de um volume adicional do Elastic Block Store (EBS) em gigabytes (GB). O volume do EBS é anexado a cada instância do grupo de instâncias. O caminho de montagem padrão para o volume adicional do EBS é/opt/sagemaker. Depois que o cluster for criado com sucesso, você poderá entrar por SSH nas instâncias do cluster (nós) e verificar se o volume do EBS está montado corretamente executando o comando df -h. A anexação de um volume adicional do EBS fornece armazenamento estável, fora da instância e com persistência independente, conforme descrito na seção de volumes do Amazon EBS no Guia do usuário do Amazon Elastic Block Store.

8. Em Verificações de integridade profundas de instância, escolha sua opção. As verificações de integridade profundas monitoram a integridade da instância durante a criação e após atualizações de software, recuperando automaticamente as instâncias defeituosas por meio de reinicializações ou substituições quando habilitadas.

9. Escolha Adicionar grupo de instâncias.

Em Padrões de configuração rápida, analise as configurações padrão. Esta seção lista todas as configurações padrão para a criação do cluster, incluindo todos os novos AWS recursos que serão criados durante o processo de criação do cluster.

Selecione Enviar.