View a markdown version of this page

Creazione di un cluster in AWS PZ - AWS PEZZI
PrerequisitiCrea un AWS Cluster PCS

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Creazione di un cluster in AWS PZ

Questo argomento fornisce una panoramica delle opzioni disponibili e descrive gli elementi da considerare quando si crea un cluster in AWS Parallel Computing Service (AWS PCS). Se è la prima volta che crei un cluster AWS PCS, ti consigliamo di seguirloInizia con AWS Servizio di elaborazione parallela. Il tutorial può aiutarti a creare un sistema HPC funzionante senza approfondire tutte le opzioni e le architetture di sistema disponibili possibili.

Nota

Dopo aver creato un cluster, è possibile modificare molte impostazioni di configurazione senza ricostruire l'infrastruttura. Per ulteriori informazioni, consulta Aggiornamento di un cluster in AWS PZ.

Nota

È possibile configurare impostazioni Slurm personalizzate per implementare politiche di pianificazione avanzate e gestione delle risorse. Per ulteriori informazioni, consulta Configurazione delle impostazioni personalizzate di Slurm in AWS 2 PEZZI.

Prerequisiti

Crea un AWS Cluster PCS

È possibile utilizzare Console di gestione AWS o AWS CLI per creare un cluster.

Console di gestione AWS
Come creare un cluster

  1. Apri la console AWS PCS all'indirizzo https://console.aws.amazon.com/pcs/home#/clusters e scegli Crea cluster.

  2. Nella sezione Configurazione del cluster, inserisci i seguenti campi:

    • Nome del cluster: un nome per il cluster. Il nome può contenere solo caratteri alfanumerici (con distinzione tra lettere maiuscole e minuscole) e trattini. Deve iniziare con un carattere alfabetico e non può superare i 40 caratteri. Il nome deve essere univoco all'interno del Regione AWS e in Account AWS cui si sta creando il cluster.

    • Scheduler: scegli uno scheduler e una versione. Per ulteriori informazioni, consulta Versioni di Slurm in AWS 2 PEZZI.

    • Dimensioni del controller: scegli una dimensione per il controller. Ciò determina il numero di lavori e nodi di elaborazione simultanei che possono essere gestiti dal cluster AWS PCS. È possibile impostare la dimensione del controller solo al momento della creazione del cluster. Per ulteriori informazioni sul dimensionamento, vedereDimensione del cluster in AWS PCS.

  3. Nella sezione Rete, selezionate i valori per i seguenti campi:

    • Tipo di rete: scegli il tipo di indirizzo IP per il tuo cluster. Il cluster può utilizzare IPv4 o IPv6, ma non entrambi. Il VPC e le sottoreti devono utilizzare lo stesso tipo di indirizzo di rete. Il blocco di indirizzi IP utilizzato per ogni sottorete deve avere almeno un indirizzo disponibile. AWS riserva alcuni indirizzi in ogni sottorete. Per ulteriori informazioni, consulta Blocchi CIDR della sottorete nella Guida per l'utente di Amazon VPC.

    • VPC: scegli un VPC esistente che soddisfi i requisiti PCS. AWS Per ulteriori informazioni, consulta AWS Requisiti e considerazioni su PCS, VPC e sottorete. Dopo aver creato il cluster, non puoi modificarne il VPC. Se non è elencato alcun VPC, devi prima crearne uno.

    • Subnet: vengono elencate tutte le sottoreti disponibili nel VPC selezionato. Scegli una sottorete che soddisfi i requisiti della sottorete PCS. AWS Per ulteriori informazioni, consulta AWS Requisiti e considerazioni su PCS, VPC e sottorete. Ti consigliamo di selezionare una sottorete privata per evitare di esporre gli endpoint dello scheduler alla rete Internet pubblica.

    • Gruppi di sicurezza: specificate i gruppi di sicurezza che desiderate che AWS PCS associ alle interfacce di rete create per il cluster. È necessario selezionare almeno un gruppo di sicurezza che consenta la comunicazione tra il cluster e i relativi nodi di elaborazione. È possibile selezionare Creazione rapida di un gruppo di sicurezza per fare in modo che AWS PCS ne crei uno con la configurazione necessaria nel VPC selezionato oppure selezionare un gruppo di sicurezza esistente. Per ulteriori informazioni, consulta Requisiti e considerazioni sui gruppi di sicurezza.

  4. (Facoltativo) Nella sezione di configurazione della contabilità Slurm, è possibile abilitare la contabilità Slurm e impostare i parametri di contabilità. Per ulteriori informazioni, consulta Contabilità Slurm in AWS 2 PEZZI.

  5. (Facoltativo) Nella sezione di configurazione dello Scheduler, è possibile aggiungere coppie di nomi e valori dei parametri per configurare impostazioni Slurm aggiuntive. Per un elenco completo dei parametri supportati, vedere. Impostazioni Slurm personalizzate per AWS Cluster PCS Puoi anche configurare impostazioni personalizzate di cgroup (vediConfigurazione delle impostazioni personalizzate di cgroup in AWS 2 PEZZI) e impostazioni personalizzate di SlurmDBD (vedi). Configurazione delle impostazioni personalizzate di SlurMDBD in AWS 2 PEZZI

    Inoltre, puoi anche specificare le seguenti impostazioni:

    1. Scale-down tempo di inattività: (Facoltativo) Il tempo in secondi prima che un nodo inattivo venga ridimensionato. Per impostazione predefinita, ciò si applica a tutti i gruppi di nodi di calcolo del cluster. A partire dalla versione Slurm 25.11, i singoli gruppi di nodi di calcolo possono sovrascrivere questo valore con la propria Scale-down impostazione del tempo di inattività.

  6. (Facoltativo) In Tag, aggiungi qualsiasi tag al tuo cluster PCS. AWS

  7. Scegli Crea cluster. Il campo Status mostra Creating mentre il AWS PCS crea il cluster. Questo processo può richiedere alcuni minuti.

Importante

Può esserci solo 1 cluster in uno Creating stato Regione AWS per ogni stato Account AWS. AWS PCS restituisce un errore se c'è già un cluster in uno Creating stato quando si tenta di creare un cluster.

AWS CLI
Come creare un cluster

  1. Crea un cluster con il comando seguente. Prima di eseguire il comando, apporta le modifiche seguenti:

    • Sostituiscilo region con l'ID in Regione AWS cui desideri creare il cluster, ad esempious-east-1.

    • Sostituisci my-cluster con un nome da assegnare al cluster. Il nome può contenere solo caratteri alfanumerici (con distinzione tra lettere maiuscole e minuscole) e trattini. Deve iniziare con un carattere alfabetico e non può superare i 40 caratteri. Il nome deve essere univoco all'interno Regione AWS e nel Account AWS luogo in cui si sta creando il cluster.

    • 25.11Sostituiscilo con qualsiasi versione supportata di Slurm.

      Nota

      AWS PCS attualmente supporta Slurm 25.11 e 25.05.

    • Sostituiscilo SMALL con qualsiasi dimensione di cluster supportata. Ciò determina quanti processi e nodi di calcolo simultanei possono essere gestiti dal cluster AWS PCS. Può essere impostato solo al momento della creazione del cluster. Per ulteriori informazioni sul dimensionamento, vedereDimensione del cluster in AWS PCS.

    • Sostituisci il valore di subnetIds con il tuo. Ti consigliamo di selezionare una sottorete privata per evitare di esporre gli endpoint dello scheduler alla rete Internet pubblica.

    • Specificate securityGroupIds quello che desiderate che AWS PCS associ alle interfacce di rete che crea per il cluster. I gruppi di sicurezza devono trovarsi nello stesso VPC del cluster. È necessario selezionare almeno un gruppo di sicurezza che consenta la comunicazione tra il cluster e i relativi nodi di calcolo. Per ulteriori informazioni, consulta Requisiti e considerazioni sui gruppi di sicurezza. 

    aws pcs create-cluster --region region \
    --cluster-name my-cluster \
    --scheduler type=SLURM,version=25.11 \
    --size SMALL \
    --networking subnetIds=subnet-ExampleId1,securityGroupIds=sg-ExampleId1

    • per utilizzare IPv6, aggiungilo networkType=IPV6 alla configurazione. --networking

        --networking networkType=IPV6,subnetIds=subnet-ExampleId1,securityGroupIds=sg-ExampleId1

    • Facoltativamente, è possibile aggiungere l'--slurm-configrationopzione per personalizzare il comportamento di Slurm e specificare le opzioni di configurazione Slurm. L'esempio seguente imposta il tempo di inattività della scala ridotta a 60 minuti (3600 secondi), abilita la contabilità Slurm e specifica le impostazioni come valore per. slurm.conf slurmCustomSettings Per ulteriori informazioni, consulta Contabilità Slurm in AWS 2 PEZZI.

      Nota

      La contabilità è supportata per Slurm 24.11 o versioni successive.

      Nota

      Per impostazione predefinita, il livello di cluster scaleDownIdleTimeInSeconds si applica a tutti i gruppi di nodi di calcolo del cluster. A partire dalla versione Slurm 25.11, i singoli gruppi di nodi di calcolo possono sovrascrivere questo valore con le proprie impostazioni. scaleDownIdleTimeInSeconds

      aws pcs create-cluster --region region \
    --cluster-name my-cluster \
    --scheduler type=SLURM,version=25.11 \
    --size SMALL \
    --networking subnetIds=subnet-ExampleId1,securityGroupIds=sg-ExampleId1
    --slurm-configuration scaleDownIdleTimeInSeconds=3600,accounting='{mode=STANDARD}',slurmCustomSettings='[{parameterName=SelectTypeParameters,parameterValue=CR_CPU_Memory}]'

  2. Il provisioning del cluster può richiedere diversi minuti. È possibile eseguire query sullo stato del cluster con il comando seguente. Non procedere alla creazione di code o gruppi di nodi di calcolo finché non viene visualizzato il campo di stato del cluster. ACTIVE

    aws pcs get-cluster --region region --cluster-identifier my-cluster
Importante

Può esserci solo 1 cluster in uno Creating stato per ogni stato. Regione AWS Account AWS AWS PCS restituisce un errore se c'è già un cluster in uno Creating stato quando si tenta di creare un cluster.
Passaggi successivi consigliati per il cluster

  • Aggiungi gruppi di nodi di calcolo.

  • Aggiungi code.

  • Attivare la registrazione nel log.