Un'istanza EC2 in AWS Il PCS viene terminato e sostituito dopo il riavvio

panoramica dei problemi

Dopo il riavvio di un'istanza EC2 in un gruppo di nodi di calcolo, AWS PCS termina e sostituisce automaticamente l'istanza.

Perché questo accade

AWS PCS non supporta il riavvio delle istanze. Se un'istanza EC2 viene riavviata, AWS PCS la considera non integra e la sostituisce. Se AWS PCS termina e sostituisce continuamente le tue istanze, potrebbe essere perché qualcosa riavvia le istanze dopo il loro avvio. Alcuni esempi includono il riavvio tramite automazione sull'istanza EC2 (ad esempio un riavvio automatico dopo l'applicazione delle patch), l'automazione esterna all'istanza EC2 (come un'applicazione di gestione della rete), un altro AWS servizio (ad esempio) o un riavvio manuale da parte di una persona. AWS Systems Manager

Cosa fare

Puoi controllare i tuoi slurmd log per vedere se l'slurmctldistanza è stata riavviata. Per ulteriori informazioni, consulta Registri dell'utilità di pianificazione in PCS AWS e Monitoraggio AWS Istanze PCS che utilizzano Amazon CloudWatch. La seguente voce di slurmctld registro di esempio indica che l'istanza è stata riavviata:

[2024-09-12T06:42:50.393+00:00] validate_node_specs: Node Login-1 unexpectedly rebooted boot_time=1726123354 last response=1726123285

Riavvio a causa dell'applicazione di patch

Spesso è necessario un riavvio dopo aver applicato le patch. Non applicare le patch direttamente a un'istanza EC2 che fa parte di un gruppo di nodi di calcolo AWS PCS. Se devi applicare una patch alle tue istanze EC2, dovresti applicare le patch a un'Amazon Machine Image (AMI) aggiornata e aggiornare i gruppi di nodi di calcolo per utilizzare l'AMI aggiornata. Le nuove istanze EC2 avviate da AWS PCS per quei gruppi di nodi di calcolo utilizzeranno l'AMI aggiornata (patchata). Per ulteriori informazioni, consulta Immagini di macchine Amazon personalizzate (AMIs) per AWS PCS.