Esegui la migrazione delle applicazioni a un nuovo gruppo di nodi

Recuperare il nome dei gruppi di nodi esistenti, sostituendo my-cluster con il nome del cluster.

eksctl get nodegroups --cluster=my-cluster

Di seguito viene riportato un output di esempio:

CLUSTER      NODEGROUP          CREATED               MIN SIZE      MAX SIZE     DESIRED CAPACITY     INSTANCE TYPE     IMAGE ID
default      standard-nodes   2019-05-01T22:26:58Z  1             4            3                    t3.medium         ami-05a71d034119ffc12

Avvia un nuovo gruppo di nodi con eksctl con il comando seguente. Nel comando, sostituire ogni example value con i propri valori. Il numero di versione non può essere successivo alla versione Kubernetes per il piano di controllo. Inoltre, non può essere più di due versioni secondarie precedenti rispetto a quella Kubernetes per il piano di controllo. Si consiglia di utilizzare la stessa versione del piano di controllo.

Consigliamo di bloccare l’accesso dei pod a IMDS se si verificano le seguenti condizioni:

eksctl create nodegroup \
  --cluster my-cluster \
  --version 1.33 \
  --name standard-nodes-new \
  --node-type t3.medium \
  --nodes 3 \
  --nodes-min 1 \
  --nodes-max 4 \
  --managed=false

Quando il comando precedente viene completato, verificare che tutti i nodi abbiano raggiunto lo stato Ready con il comando seguente:

kubectl get nodes

Eliminare il gruppo di nodi originale con il comando seguente. Nel comando, sostituire ogni example value con i nomi dei cluster e dei gruppi di nodi:

eksctl delete nodegroup --cluster my-cluster --name standard-nodes-old

Avvia un nuovo gruppo di nodi seguendo i passaggi descritti in Create self-managed Amazon Linux nodes.

Al termine della creazione dello stack, selezionalo nella console e scegli Output.

Registra il NodeInstanceRoleper il gruppo di nodi che è stato creato. Ciò è necessario per aggiungere i nuovi nodi Amazon EKS al cluster.

Aggiorna i gruppi di sicurezza per entrambi i gruppi di nodi in modo che possano comunicare tra loro. Per ulteriori informazioni, consulta Visualizzazione dei requisiti relativi al gruppo di sicurezza Amazon EKS per cluster.

Modifica la configmap aws-auth per mappare il nuovo ruolo dell’istanza del nodo in RBAC.

kubectl edit configmap -n kube-system aws-auth

Aggiungi una nuova voce mapRoles per il nuovo gruppo di nodi.

apiVersion: v1
data:
  mapRoles: |
    - rolearn: ARN of instance role (not instance profile)
      username: system:node:{{EC2PrivateDNSName}}
      groups:
        - system:bootstrappers
        - system:nodes>
    - rolearn: arn:aws: iam::111122223333:role/nodes-1-16-NodeInstanceRole-U11V27W93CX5
      username: system:node:{{EC2PrivateDNSName}}
      groups:
        - system:bootstrappers
        - system:nodes

Sostituisci lo ARN of instance role (not instance profile) snippet con il NodeInstanceRolevalore registrato nel passaggio precedente. Quindi, salva e chiudi il file per applicare la configmap aggiornata.

Guarda lo stato dei nodi e attendi fino a quando i nuovi nodi si uniscono al cluster e raggiungono lo stato Ready.

kubectl get nodes --watch

(Facoltativo) Se stai utilizzando il Cluster Autoscaler Kubernetes, dimensiona l’implementazione fino a zero (0) repliche per evitare azioni di dimensionamento conflittuali.

kubectl scale deployments/cluster-autoscaler --replicas=0 -n kube-system

Utilizzare il comando seguente per il taint di ciascuno dei nodi che si desidera rimuovere con NoSchedule. In questo modo i nuovi pod non vengono pianificati o riprogrammati sui nodi che stai sostituendo. Per ulteriori informazioni, consulta Taints and Tolerations nella documentazione di Kubernetes.

kubectl taint nodes node_name key=value:NoSchedule

Se aggiorni i nodi a una nuova versione di Kubernetes, puoi identificare ed eseguire il taint di tutti i nodi di una determinata versione di Kubernetes (in questo caso, 1.31) con il seguente frammento di codice. Il numero di versione non può essere successivo alla versione Kubernetes del piano di controllo. Inoltre, non può essere più di due versioni secondarie precedenti rispetto alla versione Kubernetes del piano di controllo. Si consiglia di utilizzare la stessa versione del piano di controllo.

K8S_VERSION=1.31
nodes=$(kubectl get nodes -o jsonpath="{.items[?(@.status.nodeInfo.kubeletVersion==\"v$K8S_VERSION\")].metadata.name}")
for node in ${nodes[@]}
do
    echo "Tainting $node"
    kubectl taint nodes $node key=value:NoSchedule
done

Determina il provider DNS del cluster.

kubectl get deployments -l k8s-app=kube-dns -n kube-system

Di seguito viene riportato un output di esempio. Questo cluster utilizza CoreDNS per la risoluzione DNS, ma il cluster può invece restituire kube-dns):

NAME      DESIRED   CURRENT   UP-TO-DATE   AVAILABLE   AGE
coredns   1         1         1            1           31m

Se l’implementazione corrente è in esecuzione per un numero di volte inferiore a 2 repliche, scalare la distribuzione a 2 repliche. Sostituire coredns con kubedns se l'output del comando precedente ha avuto tale risultato.

kubectl scale deployments/coredns --replicas=2 -n kube-system

Svuotare ciascuno dei nodi che si desidera rimuovere dal cluster con il comando seguente:

kubectl drain node_name --ignore-daemonsets --delete-local-data

Se stai aggiornando i tuoi nodi a una nuova versione di Kubernetes, identifica e svuota tutti i nodi di una particolare versione di Kubernetes (in questo caso) con il seguente frammento di codice. 1.31

K8S_VERSION=1.31
nodes=$(kubectl get nodes -o jsonpath="{.items[?(@.status.nodeInfo.kubeletVersion==\"v$K8S_VERSION\")].metadata.name}")
for node in ${nodes[@]}
do
    echo "Draining $node"
    kubectl drain $node --ignore-daemonsets --delete-local-data
done

Una volta terminata tale operazione, revocare le regole in ingresso del gruppo di sicurezza autorizzate in precedenza. Quindi, elimina lo stack per terminare le istanze. AWS CloudFormation

Modifica il configmap aws-auth per rimuovere il precedente ruolo dell’istanza del nodo da RBAC.

kubectl edit configmap -n kube-system aws-auth

Eliminare la voce mapRoles per il precedente gruppo di nodo.

apiVersion: v1
data:
  mapRoles: |
    - rolearn: arn:aws: iam::111122223333:role/nodes-1-16-NodeInstanceRole-W70725MZQFF8
      username: system:node:{{EC2PrivateDNSName}}
      groups:
        - system:bootstrappers
        - system:nodes
    - rolearn: arn:aws: iam::111122223333:role/nodes-1-15-NodeInstanceRole-U11V27W93CX5
      username: system:node:{{EC2PrivateDNSName}}
      groups:
        - system:bootstrappers
        - system:nodes>

Salvare e chiudere il file per applicare la configmap aggiornata.

(Facoltativo) Se si sta utilizzando il Cluster Autoscaler Kubernetes, dimensionare l’implementazione a 1 replica.

kubectl scale deployments/cluster-autoscaler --replicas=1 -n kube-system

(Facoltativo) Verifica se stai utilizzando la versione più recente del plug-in CNI di Amazon VPC per Kubernetes. Potrebbe essere necessario aggiornare la versione CNI per utilizzare i tipi di istanze supportati più recenti. Per ulteriori informazioni, consulta Assegna IPs ai pod con Amazon VPC CNI.

Se il cluster utilizza kube-dns per la risoluzione DNS (vedi [migrate-determine-dns-step]), riduci orizzontalmente l’implementazione kube-dns a 1 replica.

kubectl scale deployments/kube-dns --replicas=1 -n kube-system