Creación de un clúster con CloudFormation

1. Inicie sesión en Consola de administración de AWS.

2. Abra el enlace CloudFormation de creación rápida para crear los siguientes recursos en la CloudFormation consola:

   • Una CloudFormation pila anidada con una VPC con una subred pública y una privada para ejecutar el nodo principal del clúster y los nodos de procesamiento, respectivamente.

   • Una CloudFormation pila anidada con un recurso AWS ParallelCluster personalizado para administrar el clúster.

   • Una CloudFormation pila anidada con las políticas predeterminadas para administrar el clúster.

   • Una CloudFormation pila raíz para las pilas anidadas.

   • Un AWS ParallelCluster clúster con el Slurm planificador y un número definido de nodos de procesamiento.

   

3. En la sección Parámetros Creación rápida de pila, proporcione valores para los parámetros siguientes:

   1. Para KeyName, introduzca el nombre de su par de claves de Amazon EC2.

   2. Para AvailabilityZone, elija una zona de disponibilidad para los nodos de su clúster, por ejemplo,us-east-1a.

4. Elija las casillas de verificación para confirmar las capacidades de acceso en la parte inferior de la página.

5. Seleccione Creación de pila.

6. Espere a que la CloudFormation pila alcance el CREATE_COMPLETE estado.

1. Cree una CloudFormation plantilla cluster_template.yaml con el siguiente contenido:

   AWSTemplateFormatVersion: '2010-09-09'
   Description: > AWS ParallelCluster CloudFormation Template
   
   Parameters:
     KeyName:
       Description: KeyPair to login to the head node
       Type: AWS::EC2::KeyPair::KeyName
   
     AvailabilityZone:
       Description: Availability zone where instances will be launched
       Type: AWS::EC2::AvailabilityZone::Name
       Default: us-east-2a
   
   Mappings:
     ParallelCluster:
       Constants:
         Version: 3.16.1
   
   Resources:
     PclusterClusterProvider:
       Type: AWS::CloudFormation::Stack
       Properties:
         TemplateURL: !Sub
           - https://${AWS::Region}-aws-parallelcluster.s3.${AWS::Region}.${AWS::URLSuffix}/parallelcluster/${Version}/templates/custom_resource/cluster.yaml
           - { Version: !FindInMap [ParallelCluster, Constants, Version] }
   
     PclusterVpc:
       Type: AWS::CloudFormation::Stack
       Properties:
         Parameters:
           PublicCIDR: 10.0.0.0/24
           PrivateCIDR: 10.0.16.0/20
           AvailabilityZone: !Ref AvailabilityZone
         TemplateURL: !Sub
           - https://${AWS::Region}-aws-parallelcluster.s3.${AWS::Region}.${AWS::URLSuffix}/parallelcluster/${Version}/templates/networking/public-private-${Version}.cfn.json
           - { Version: !FindInMap [ParallelCluster, Constants, Version ] }
   
     PclusterCluster:
       Type: Custom::PclusterCluster
       Properties:
         ServiceToken: !GetAtt [ PclusterClusterProvider , Outputs.ServiceToken ]
         ClusterName: !Sub 'c-${AWS::StackName}'
         ClusterConfiguration:
           Image:
             Os: alinux2023
           HeadNode:
             InstanceType: t2.medium
             Networking:
               SubnetId: !GetAtt [ PclusterVpc , Outputs.PublicSubnetId ]
             Ssh:
               KeyName: !Ref KeyName
           Scheduling:
             Scheduler: slurm
             SlurmQueues:
             - Name: queue0
               ComputeResources:
               - Name: queue0-cr0
                 InstanceType: t2.micro
               Networking:
                 SubnetIds:
                 -  !GetAtt [ PclusterVpc , Outputs.PrivateSubnetId ]
   Outputs:
     HeadNodeIp:
       Description: The Public IP address of the HeadNode
       Value: !GetAtt [ PclusterCluster, headNode.publicIpAddress ]

2. Ejecute el siguiente comando de la AWS CLI para implementar la CloudFormation pila para la creación y administración de clústeres.

   $ aws cloudformation deploy --template-file ./cluster_template.yaml \
     --stack-name mycluster \
     --parameter-overrides KeyName=keypair \
                           AvailabilityZone=us-east-2b \
     --capabilities CAPABILITY_NAMED_IAM CAPABILITY_AUTO_EXPAND

1. Navegue hasta la CloudFormation consola y seleccione la pila que incluye su recurso AWS ParallelCluster personalizado.

2. Elija los detalles de la pila y a continuación, seleccione la pestaña Salidas.

   

   Es posible que los mensajes de validación queden truncados. Para obtener más información acerca de la recuperación de registros, consulte AWS ParallelCluster solución de problemas.

ssh en el nodo principal del clúster

1. Una vez completado el despliegue de la CloudFormation pila, obtenga la dirección IP del nodo principal con el siguiente comando:

   $ HEAD_NODE_IP=$(aws cloudformation describe-stacks --stack-name=mycluster --query "Stacks|[0].Outputs[?OutputKey=='HeadNodeIp']|[0].OutputValue" --output=text)

   También puede recuperar la dirección IP del nodo principal desde el HeadNodeIp parámetro de la pestaña Salidas de la pila de clústeres de la CloudFormation consola.

   Puede encontrar la dirección IP del nodo principal aquí porque se agregó en la Outputs sección de la CloudFormation plantilla de clúster, específicamente para este clúster de ejemplo.

2. Conéctese al nodo principal del clúster ejecutando el siguiente comando:

   $ ssh -i keyname.pem ec2-user@$HEAD_NODE_IP

1. Ejecute el siguiente comando de la AWS CLI para eliminar la CloudFormation pila y el clúster.

   $ aws cloudformation delete-stack --stack-name=mycluster

2. Ejecute el siguiente comando para comprobar el estado de la eliminación de la pila.

   $ aws cloudformation describe-stacks --stack-name=mycluster