このページの改善にご協力ください
このユーザーガイドに貢献するには、すべてのページの右側のペインにある「GitHub でこのページを編集する」リンクを選択してください。
Amazon EKS ノードで使用可能な IP アドレスを増やす
個別のセカンダリ IP アドレスではなく、IP プレフィックスをノードに割り当てて、ノードで Pod に割り当て可能な IP アドレスの数を増やす方法について説明します。
前提条件
-
既存のクラスターが必要です。デプロイするには、Amazon EKS クラスターを作成します。 を参照してください。
-
Amazon EKS ノードが配置されているサブネットでは、
/28個の連続ブロック (IPv4クラスターの場合)、または/80個の Classless Inter-Domain Routing (CIDR) ブロック (IPv6クラスターの場合) が十分な数として必要になります。IPv6クラスターに含めることができるのは Linux ノードだけです。IP アドレスがサブネット CIDR 全体に分散している場合、IP プレフィックスを使用すると失敗する可能性があります。次の構成を推奨します。-
サブネット CIDR 予約を使用すると、予約された範囲内の IP アドレスがまだ使用されている場合でも、解放時に IP アドレスが再割り当てされません。これにより、セグメンテーションなしでプレフィックスを割り当てることができます。
-
IP プレフィックスが割り当てられているワークロードの実行に特に使用される新しいサブネットを使用してください。IP プレフィックスを割り当てると、Windows と Linux 両方のワークロードを同じサブネットで実行できます。
-
-
ノードに IP プレフィックスを割り当てるには、ノードが AWS Nitro ベースである必要があります。Nitro ベースではないインスタンスでは、引き続き個別のセカンダリ IP アドレスが割り当てられますが、Pod に割り当てることのできる IP アドレスの数は Nitro ベースのインスタンスよりも大幅に少なくなります。
-
Linux ノードのみのクラスターの場合 – クラスターが
IPv4ファミリーで設定されている場合は、バージョン1.9.0以降の Amazon VPC CNI plugin for Kubernetes アドオンがインストールされている必要があります。現在のバージョンは、次のコマンドで確認できます。kubectl describe daemonset aws-node --namespace kube-system | grep Image | cut -d "/" -f 2クラスターが
IPv6ファミリーで設定されている場合は、バージョン1.10.1のアドオンがインストールされている必要があります。プラグインバージョンが必要なバージョンよりも古い場合は、更新する必要があります。詳細については、「Amazon VPC CNI を使用してポッドに IP を割り当てる」の更新セクションを参照してください。 -
Windows ノードのみのクラスターの場合
-
クラスターで Windows サポートを有効にする必要があります。詳細については、EKS クラスターに WiWindows ノードをデプロイする を参照してください。
-
ノードに IP アドレスプレフィックスを割り当てる
ノードに IP アドレスプレフィックスを割り当てるようにクラスターを設定します。ノードのオペレーティングシステムに対応する手順を完了します。
Linux
-
パラメータを有効にして、Amazon VPC CNI DaemonSet のネットワークインターフェイスにプレフィックスを割り当てます。クラスターをデプロイすると、バージョン
1.10.1以降の Amazon VPC CNI plugin for Kubernetes アドオンも同時にデプロイされます。IPv6ファミリーを使用してクラスターを作成している場合、この設定はデフォルトでtrueに設定されています。IPv4ファミリーを使用してクラスターを作成している場合、この設定はデフォルトでfalseに設定されています。kubectl set env daemonset aws-node -n kube-system ENABLE_PREFIX_DELEGATION=true重要
サブネットに使用可能な IP アドレスがある場合でも、サブネットに使用可能な
/28個の連続したブロックがない場合には、Amazon VPC CNI plugin for Kubernetes ログに次のエラーが記述されます。InsufficientCidrBlocks: The specified subnet does not have enough free cidr blocks to satisfy the requestこれは、サブネット全体に広がる既存のセカンダリ IP アドレスの断片化が原因で発生する可能性があります。このエラーを解決するには、新しいサブネットを作成してそこに Pod を起動するか、Amazon EC2 サブネットの CIDR 予約を使用して、プレフィックス割り当てで使用するサブネット内の領域を予約します。詳細については、Amazon VPC ユーザーガイドの「サブネット CIDR の予約」を参照してください。
-
前提条件のリストに記載されたバージョン以降の Amazon VPC CNI plugin for Kubernetes を使用しながら、起動テンプレートなしでマネージドノードグループをデプロイする場合、または AMI ID を指定していない起動テンプレートを使用してデプロイする場合には、このまま次のステップに進みます。マネージド型ノードグループは、Pod の最大数を自動的に計算します。
セルフマネージド型ノードグループ、または AMI ID を指定した起動テンプレートを使用したマネージド型ノードグループをデプロイする場合は、ノードの最大 Pod 数を設定する必要があります。適切な値を決定する方法の詳細については、maxPods の決定方法 を参照してください。
重要
マネージド型ノードグループは、
maxPodsの値に最大数を適用します。vCPUs が 30 未満のインスタンスの場合、最大数は 110 で、その他すべてのインスタンスの最大数は 250 です。この最大数は、プレフィックス委任が有効かどうかにかかわらず適用されます。 -
IPv6用に設定されたクラスターを使用している場合は、このまま次のステップに進みます。以下のオプションの内の 1 つでパラメータを指定します。どのオプションが適切で、どの値を提供するかを決定するには、GitHub の「WARM_PREFIX_TARGET, WARM_IP_TARGET, and MINIMUM_IP_TARGET
」を参照してください。 example values は、ゼロより大きい値で置き換えます。
-
WARM_PREFIX_TARGETkubectl set env ds aws-node -n kube-system WARM_PREFIX_TARGET=1 -
WARM_IP_TARGETまたはMINIMUM_IP_TARGET– この値を設定した場合、WARM_PREFIX_TARGETに対し設定されている値はすべて上書きされます。kubectl set env ds aws-node -n kube-system WARM_IP_TARGET=5kubectl set env ds aws-node -n kube-system MINIMUM_IP_TARGET=2
-
-
少なくとも 1 つの Amazon EC2 Nitro Amazon Linux 2023 インスタンスタイプを使用して、次のいずれかのタイプのノードグループを作成します。Nitro インスタンスタイプのリストについては、「Amazon EC2 ユーザーガイド」の「Instances built on the Nitro System」を参照してください。この機能は Windows ではサポートされていません。
110が含まれているオプションの場合は、ステップ 3 の値 (推奨) または独自の値に置き換えてください。-
セルフマネージド –「セルフマネージド Amazon Linux ノードを作成する」の手順に従い、ノードグループをデプロイします。CloudFormation スタックを作成する前に、テンプレートファイルを開き、次のように
UserDataのNodeLaunchTemplateを調整します。... apiVersion: node.eks.aws/v1alpha1 kind: NodeConfig spec: cluster: name: ${ClusterName} apiServerEndpoint: ${ApiServerEndpoint} certificateAuthority: ${CertificateAuthorityData} cidr: ${ServiceCidr} kubelet: config: maxPods: 110 ...eksctlを使用してノードグループを作成する場合は、次のコマンドを使用できます。eksctl create nodegroup --cluster my-cluster --managed=false --max-pods-per-node 110 -
マネージド型 — 次のいずれかのオプションを使用して、ノードグループをデプロイします:
-
起動テンプレートがない場合、または AMI ID が指定されていない起動テンプレートを使用する場合 –「クラスターのマネージドノードグループを作成する」の手順を完了します。マネージド型ノードグループは、Amazon EKS で推奨される
max-podsの値を自動的に計算します。 -
指定した AMI ID を持つ起動テンプレート — 起動テンプレートで Amazon EKS 最適化 AMI ID を指定するか、Amazon EKS 最適化 AMI から構築されたカスタム AMI を指定してから、起動テンプレートを使用してノードグループをデプロイ 起動テンプレートでは、次のユーザーデータを指定します。このユーザーデータが
NodeConfigオブジェクトを渡してノードのnodeadmツールによって読み取られます。nodeadmの詳細については、nodeadm のドキュメントを参照してください。 MIME-Version: 1.0 Content-Type: multipart/mixed; boundary="//" --// Content-Type: application/node.eks.aws --- apiVersion: node.eks.aws/v1alpha1 kind: NodeConfig spec: cluster: apiServerEndpoint: [.replaceable]`my-cluster` certificateAuthority: [.replaceable]`LS0t...` cidr: [.replaceable]`10.100.0.0/16` name: [.replaceable]`my-cluster kubelet: config: maxPods: [.replaceable]`110` --//--eksctlを使用してノードグループを作成する場合は、次のコマンドを使用できます。eksctl create nodegroup --cluster my-cluster --max-pods-per-node 110Amazon EKS 最適化 AMI から構築されていないカスタム AMI を作成した場合は、自分で設定をカスタム作成する必要があります。
-
注記
また、インスタンスとは異なるサブネットの Pod に IP アドレスを割り当てる場合は、このステップで機能を有効化する必要があります。詳細については、カスタムネットワーキングを使用して代替サブネットに Pod をデプロイする を参照してください。
-
Windows
-
IP プレフィックスの割り当てを有効にします。
-
編集する
amazon-vpc-cniConfigMapを開きます。kubectl edit configmap -n kube-system amazon-vpc-cni -o yaml -
dataセクションに次の行を追加します。enable-windows-prefix-delegation: "true" -
ファイルを保存し、エディタを閉じます。
-
ConfigMapに行が追加されたことを確認します。kubectl get configmap -n kube-system amazon-vpc-cni -o "jsonpath={.data.enable-windows-prefix-delegation}"返された出力が
trueでない場合は、エラーが発生した可能性があります。ステップをもう一度実行してみてください。重要
サブネットに使用可能な IP アドレスがある場合でも、サブネットに使用可能な
/28個の連続したブロックがない場合には、Amazon VPC CNI plugin for Kubernetes ログに次のエラーが記述されます。InsufficientCidrBlocks: The specified subnet does not have enough free cidr blocks to satisfy the requestこれは、サブネット全体に広がる既存のセカンダリ IP アドレスの断片化が原因で発生する可能性があります。このエラーを解決するには、新しいサブネットを作成してそこに Pod を起動するか、Amazon EC2 サブネットの CIDR 予約を使用して、プレフィックス割り当てで使用するサブネット内の領域を予約します。詳細については、Amazon VPC ユーザーガイドの「サブネット CIDR の予約」を参照してください。
-
-
(オプション) クラスターの事前スケーリング動作と動的スケーリング動作を制御するための追加設定を指定します。詳細については、「GitHub」の「 Windows でのプレフィックス委任モードの設定オプション
」を参照してください。 -
編集する
amazon-vpc-cniConfigMapを開きます。kubectl edit configmap -n kube-system amazon-vpc-cni -o yaml -
サンプル値を 0 より大きい値に置き換え、必要なエントリを
ConfigMapのdataセクションに追加します。warm-ip-targetまたはminimum-ip-targetのいずれかに値を設定した場合、その値はwarm-prefix-targetに設定された値をオーバーライドします。warm-prefix-target: "1" warm-ip-target: "5" minimum-ip-target: "2" -
ファイルを保存し、エディタを閉じます。
-
-
少なくとも 1 つの Amazon EC2 Nitro インスタンスタイプで Windows ノードグループを作成します。Nitro インスタンスタイプのリストについては、「Amazon EC2 ユーザーガイド」の「Instances built on the Nitro System」を参照してください。デフォルトでは、1 つのノードにデプロイできる Pod の最大数は 110 です。この数値を増減させる場合は、ブートストラップ設定のユーザーデータに以下を指定します。
max-pods-quantityを最大ポッド値に置き換えます。-KubeletExtraArgs '--max-pods=max-pods-quantity'マネージド型ノードグループをデプロイする場合は、この設定を起動テンプレートに追加する必要があります。詳細については、起動テンプレートを使用してマネージドノードをカスタマイズする を参照してください。Windows ブートストラップスクリプトの設定パラメータの詳細については、「ブートストラップスクリプトの設定パラメータ」を参照してください。
最大 Pod 数と使用可能な IP アドレスを決定する
-
ノードがデプロイされると、クラスター内のノードの表示が可能になります。
kubectl get nodes出力例は次のとおりです。
NAME STATUS ROLES AGE VERSION ip-192-168-22-103.region-code.compute.internal Ready <none> 19m v1.XX.X-eks-6b7464 ip-192-168-97-94.region-code.compute.internal Ready <none> 19m v1.XX.X-eks-6b7464 -
いずれかのノードを記述して、そのノードの
max-pods値と使用可能な IP アドレスの数を決定します。192.168.30.193を、前の出力で返されたいずれかのノードの名前のIPv4アドレスに置き換えます。kubectl describe node ip-192-168-30-193.region-code.compute.internal | grep 'pods\|PrivateIPv4Address'出力例は次のとおりです。
pods: 110 vpc.amazonaws.com/PrivateIPv4Address: 144前の出力にある
110は、144個の IP アドレスが使用可能であるにもかかわらず、Kubernetes がノードにデプロイする Pod の最大数です。