Création d'un cluster dans AWS Parallel Computing Service

Nom du cluster : nom de votre cluster. Un nom ne peut contenir que des caractères alphanumériques (sensibles à la casse) et des traits d'union. Il doit commencer par un caractère alphabétique et ne doit pas comporter plus de 40 caractères. Le nom doit être unique dans le Région AWS et dans Compte AWS lequel vous créez le cluster.

Planificateur : choisissez un planificateur et une version. Pour de plus amples informations, veuillez consulter Versions Slurm en PCS AWS.

Taille de la manette — Choisissez une taille pour votre manette. Cela détermine le nombre de tâches simultanées et de nœuds de calcul pouvant être gérés par le cluster AWS PCS. Vous ne pouvez définir la taille du contrôleur que lorsque le cluster est créé. Pour plus d'informations sur le dimensionnement, voirTaille du cluster en AWS PCS.

Type de réseau — Choisissez le type d'adresse IP de votre cluster. Votre cluster peut utiliser l'un IPv4 ou l'autre IPv6, mais pas les deux. Le VPC et les sous-réseaux doivent utiliser le même type d'adresse réseau. Le bloc d'adresses IP que vous utilisez pour chaque sous-réseau doit comporter au moins une adresse disponible. AWS réserve certaines adresses de chaque sous-réseau. Pour plus d’informations, consultez Blocs d’adresse CIDR de sous-réseau dans le Guide de l’utilisateur Amazon VPC.

VPC — Choisissez un VPC existant qui répond aux exigences du PCS. AWS Pour de plus amples informations, veuillez consulter AWS Exigences et considérations relatives au PCS, au VPC et aux sous-réseaux. Après avoir créé le cluster, vous ne pouvez pas modifier son VPC. Si aucun VPCs n'est répertorié, vous devez d'abord en créer un.

Sous-réseau : tous les sous-réseaux disponibles dans le VPC sélectionné sont répertoriés. Choisissez un sous-réseau qui répond aux exigences du sous-réseau AWS PCS. Pour de plus amples informations, veuillez consulter AWS Exigences et considérations relatives au PCS, au VPC et aux sous-réseaux. Nous vous recommandons de sélectionner un sous-réseau privé pour éviter d'exposer les points de terminaison de votre planificateur à l'Internet public.

Groupes de sécurité — Spécifiez le ou les groupes de sécurité que vous souhaitez que AWS PCS associe aux interfaces réseau qu'il crée pour votre cluster. Vous devez sélectionner au moins un groupe de sécurité qui autorise la communication entre votre cluster et ses nœuds de calcul. Vous pouvez sélectionner Création rapide d'un groupe de sécurité pour que AWS PCS en crée un avec la configuration nécessaire dans le VPC sélectionné, ou sélectionner un groupe de sécurité existant. Pour de plus amples informations, veuillez consulter Exigences et considérations relatives aux groupes de sécurité.

Diminution du temps d'inactivité : cela permet de contrôler la durée pendant laquelle les nœuds de calcul provisionnés dynamiquement restent actifs après la fin ou la fin des tâches qui leur ont été confiées. Si vous définissez cette valeur sur une valeur plus longue, il est plus probable qu'une tâche ultérieure puisse être exécutée sur le nœud, mais cela peut entraîner une augmentation des coûts. Une valeur plus courte réduira les coûts, mais peut augmenter la proportion de temps que votre système HPC passe à provisionner des nœuds par rapport à l'exécution de tâches sur ceux-ci.

Prolog — Il s'agit d'un chemin complet vers un répertoire de scripts prolog sur les instances de votre groupe de nœuds de calcul. Cela correspond au paramètre Prolog dans Slurm. Notez qu'il doit s'agir d'un répertoire et non d'un chemin d'accès à un exécutable spécifique.

Epilog : il s'agit d'un chemin complet vers un répertoire de scripts epilog sur les instances de votre groupe de nœuds de calcul. Cela correspond au paramètre Epilog dans Slurm. Notez qu'il doit s'agir d'un répertoire et non d'un chemin d'accès à un exécutable spécifique.

Paramètres du type de sélection : cela permet de contrôler l'algorithme de sélection des ressources utilisé par Slurm. La définition de cette valeur CR_CPU_Memory activera la planification basée sur la mémoire, tandis que la définition sur CR_CPU activera la planification uniquement pour le processeur. Ce paramètre correspond au SelectTypeParametersréglage dans Slurm où il SelectType est défini sur select/cons_tres par AWS PCS.

regionRemplacez-le par l'ID dans Région AWS lequel vous souhaitez créer votre cluster, tel queus-east-1.

Remplacez my-cluster par un nom pour votre cluster. Un nom ne peut contenir que des caractères alphanumériques (sensibles à la casse) et des traits d'union. Il doit commencer par un caractère alphabétique et ne doit pas comporter plus de 40 caractères. Le nom doit être unique dans le cluster Région AWS et dans Compte AWS lequel vous créez le cluster.

Remplacez-le 24.11 par n'importe quelle version prise en charge de Slurm.

Remplacez-le SMALL par n'importe quelle taille de cluster prise en charge. Cela détermine le nombre de tâches simultanées et de nœuds de calcul pouvant être gérés par le cluster AWS PCS. Il ne peut être défini que lors de la création du cluster. Pour plus d'informations sur le dimensionnement, voirTaille du cluster en AWS PCS.

Remplacez la valeur de subnetIds par la vôtre. Nous vous recommandons de sélectionner un sous-réseau privé pour éviter d'exposer les points de terminaison de votre planificateur à l'Internet public.

Spécifiez securityGroupIds celles que vous souhaitez associer au AWS PCS aux interfaces réseau qu'il crée pour votre cluster. Les groupes de sécurité doivent se trouver dans le même VPC que le cluster. Vous devez sélectionner au moins un groupe de sécurité qui autorise la communication entre votre cluster et ses nœuds de calcul. Pour de plus amples informations, veuillez consulter Exigences et considérations relatives aux groupes de sécurité.

Vous pouvez éventuellement fournir une clé KMS personnalisée pour chiffrer les données de votre contrôleur à l'aide --kms-key-id kms-key de. kms-keyRemplacez-le par un ARN, un ID de clé ou un alias KMS existant. Notez que le compte utilisé pour créer le cluster doit disposer de kms:Decrypt privilèges sur la clé KMS personnalisée.

pour l'utiliser IPv6, ajoutez-le networkType=IPV6 à la --networking configuration.

  --networking networkType=IPV6,subnetIds=subnet-ExampleId1,securityGroupIds=sg-ExampleId1

Vous pouvez éventuellement ajouter l'--slurm-configrationoption permettant de personnaliser le comportement de Slurm et de spécifier les options de configuration de Slurm. L'exemple suivant définit le temps d'inactivité réduit à 60 minutes (3 600 secondes), active la comptabilité Slurm et spécifie slurm.conf les paramètres comme valeur pour. slurmCustomSettings Pour de plus amples informations, veuillez consulter Comptabilité Slurm dans PCS AWS.

aws pcs create-cluster --region region \
    --cluster-name my-cluster \
    --scheduler type=SLURM,version=24.11 \
    --size SMALL \
    --networking subnetIds=subnet-ExampleId1,securityGroupIds=sg-ExampleId1
    --slurm-configuration scaleDownIdleTimeInSeconds=3600,accounting='{mode=STANDARD}',slurmCustomSettings='[{parameterName=SelectTypeParameters,parameterValue=CR_CPU_Memory}]'