Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Créez une configuration de sécurité à l'aide de la console Amazon EMR ou du AWS CLI
Cette rubrique décrit les procédures générales permettant de créer une configuration de sécurité avec la console Amazon EMR et le AWS CLI, suivie d'une référence pour les paramètres relatifs au chiffrement, à l'authentification et aux rôles IAM pour EMRFS. Pour plus d'informations sur ces fonctions, consultez les rubriques suivantes :
Pour créer une configuration de sécurité à l'aide de la console
Ouvrez la console Amazon EMR à l'adresse https://console.aws.amazon.com/emr
. -
Dans le volet de navigation, choisissez Security Configurations (Configurations de sécurité), puis Create security configuration (Créer une configuration de sécurité).
-
Dans Name (Nom), saisissez un nom pour la configuration de sécurité.
-
Choisissez les options pour Chiffrement et Authentification comme décrit dans les sections ci-dessous, puis cliquez sur Créer.
Pour créer une configuration de sécurité à l'aide du AWS CLI
-
Utilisez la commande
create-security-configuration, comme illustré dans l’exemple suivant.-
Pour
SecConfigName, spécifiez le nom de la configuration de sécurité. Il s'agit du nom que vous spécifiez lors de la création d'un cluster qui utilise cette configuration de sécurité. -
Pour
, spécifiez une structure JSON en ligne ou le chemin d'accès à un fichier JSON local, commeSecConfigDef. Les paramètres JSON définissent les options pour le Chiffrement, les Rôles IAM pour l'accès EMRFS à Amazon S3 et l'Authentification, comme décrit dans les sections suivantes.file://MySecConfig.json
aws emr create-security-configuration --name "SecConfigName" --security-configurationSecConfigDef -
Configuration du chiffrement des données
Avant de configurer le chiffrement dans une configuration de sécurité, créez les clés et certificats utilisés pour le chiffrement. Pour plus d’informations, consultez Fourniture de clés pour chiffrer les données au repos et Fournir des certificats de chiffrement des données en transit avec le chiffrement Amazon EMR.
Lorsque vous créez une configuration de sécurité, vous spécifiez deux jeux d'options de chiffrement : le chiffrement des données au repos et le chiffrement des données en transit. Les options de chiffrement des données au repos incluent à la fois Amazon S3 avec EMRFS et le chiffrement des disques locaux. In-transitles options de chiffrement activent les fonctionnalités de chiffrement open source pour certaines applications qui prennent en charge le protocole TLS (Transport Layer Security). At-rest les options et les options en transit peuvent être activées ensemble ou séparément. Pour de plus amples informations, veuillez consulter Chiffrez les données au repos et en transit avec Amazon EMR.
Note
Lorsque vous les utilisez AWS KMS, des frais s'appliquent pour le stockage et l'utilisation des clés de chiffrement. Pour plus d’informations, consultez AWS KMS Tarification
Spécification d'options de chiffrement à l'aide de la console
Choisissez les options sous Encryption (Chiffrement) en fonction des indications suivantes.
-
Choisissez les options sous At rest encryption (Chiffrement au repos) pour chiffrer les données stockées dans le système de fichiers.
Vous pouvez choisir de chiffrer les données dans Amazon S3, les disques locaux ou les deux.
-
Sous Chiffrement des données S3, pour Mode de chiffrement, choisissez une valeur qui détermine comment Amazon EMR chiffre les données Amazon S3 avec EMRFS.
L'étape suivante varie selon le mode de chiffrement que vous avez choisi :
-
SSE-S3
Spécifie Server-sidele chiffrement à l'aide des clés S3-managed de chiffrement Amazon. Aucune autre action n'est requise de votre part, car Amazon S3 gère les clés pour vous.
-
SSE-KMS ou CSE-KMS
Spécifie le chiffrement côté serveur avec AWS KMS-managed keys (SSE-KMS) ou le chiffrement côté client avec AWS KMS -managed keys (). CSE-KMS Pour AWS KMS key, sélectionnez une clé. Cette clé doit être dans la même région que votre cluster EMR. Pour voir les exigences relatives aux clés, consultez Utilisation à AWS KMS keys des fins de chiffrement.
-
CSE-Custom
Spécifie le chiffrement côté client à l'aide d'une clé racine personnalisée côté client (). CSE-custom Pour Objet S3, saisissez l'emplacement dans Amazon S3 ou l'ARN Amazon S3 du fichier JAR de votre fournisseur de clés personnalisé. Ensuite, pour la classe du fournisseur de clés, entrez le nom complet de la classe déclarée dans votre application qui implémente l'EncryptionMaterialsProvider interface.
-
-
Sous Local disk encryption (Chiffrement de disque local), choisissez une valeur pour Key provider type (Type de fournisseur de clé).
-
AWS KMS key
Sélectionnez cette option pour spécifier une AWS KMS key. Pour AWS KMS key, sélectionnez une clé. Cette clé doit être dans la même région que votre cluster EMR. Pour plus d'informations sur les exigences relatives aux clés, consultez Utilisation à AWS KMS keys des fins de chiffrement.
Chiffrement EBS
Lorsque vous AWS KMS le spécifiez comme fournisseur de clés, vous pouvez activer le chiffrement EBS pour chiffrer le périphérique racine EBS et les volumes de stockage. Pour activer cette option, vous devez accorder à la fonction du service Amazon EMR
EMR_DefaultRoleles autorisations nécessaires pour utiliser la AWS KMS key que vous spécifiez. Pour plus d'informations sur les exigences relatives aux clés, consultez Activation du chiffrement EBS en fournissant des autorisations supplémentaires pour les clés KMS. -
Personnalisé
Sélectionnez cette option pour spécifier un fournisseur de clés personnalisé. Pour Objet S3, saisissez l'emplacement dans Amazon S3 ou l'ARN Amazon S3 du fichier JAR de votre fournisseur de clés personnalisé. Pour la classe du fournisseur de clés, entrez le nom complet de la classe déclarée dans votre application qui implémente l' EncryptionMaterialsProvider interface. Le nom de classe que vous indiquez ici doit être différent du nom de classe indiqué CSE-Custom.
-
-
Choisissez In-transit le chiffrement pour activer les fonctionnalités de chiffrement TLS open source pour les données en transit. Dans Certificate provider type (Type de fournisseur de certificat), sélectionnez un type de fournisseur de certificat conformément aux consignes suivantes :
-
EMR-managed
Sélectionnez cette option pour qu'Amazon EMR crée et stocke des certificats privés pour vous. Lorsque vous sélectionnez cette option, Amazon EMR téléchargera le PEM-encoded certificat de l'autorité de certification créée sur votre compte afin AWS Secrets Manager que vous puissiez l'utiliser dans vos boutiques de confiance. Vous pouvez éventuellement configurer la clé KMS et les balises utilisées pour ce secret. Vous pouvez également éventuellement spécifier une durée de validité personnalisée pour les certificats créés et un suffixe générique personnalisé pour le certificat SAN en plus du caractère générique DNS privé par défaut (*.ec2.internal dans us-east-1 et *).
region.compute.internal dans toutes les autres régions). -
PEM
Sélectionnez cette option pour utiliser les fichiers PEM que vous fournissez au sein d'un fichier zip. Deux artefacts sont requis dans le fichier zip : privé Key.pem et certificatChain.pem. Un troisième fichier, approuvéCertificates.pem, est facultatif. Consultez Fournir des certificats de chiffrement des données en transit avec le chiffrement Amazon EMR pour plus de détails. Pour Objet S3, spécifiez l'emplacement dans Amazon S3 ou l'ARN Amazon S3 du champ du fichier zip.
-
Personnalisé
Sélectionnez cette option pour spécifier un fournisseur de certificats personnalisés, puis pour Objet S3, saisissez l'emplacement dans Amazon S3 ou l'ARN Amazon S3 du fichier JAR de votre fournisseur de clés personnalisé. Pour la classe du fournisseur de clés, entrez le nom complet de la classe déclarée dans votre application qui implémente l' TLSArtifactsProvider interface.
-
Spécification des options de chiffrement à l'aide du AWS CLI
Les sections suivantes utilisent des exemples de scénarios pour illustrer le code JSON --security-configuration bien formé pour différentes configurations et différents fournisseurs de clés, suivis d'une référence pour les paramètres JSON et les valeurs à utiliser.
Exemple d'options de chiffrement des données en transit
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est activé et le chiffrement des données au repos est désactivé.
-
Amazon EMR créera et gérera des certificats privés pour vous, avec un caractère générique faisant confiance au suffixe DNS privé EC2 de la région. L'ARN du secret créé est ajouté au CACertificateSecretARN champ visible dans la réponse de l'API describe-security-configuration.
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": true, "EnableAtRestEncryption": false, "InTransitEncryptionConfiguration": { "TLSCertificateConfiguration": { "CertificateProviderType": "EMR" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est activé à l'aide EMR-managed des certificats Amazon, en spécifiant une clé KMS client et des balises pour la création du secret et en ajoutant le suffixe DNS public EC2 pour la région à la liste SAN des certificats créés. Le certificat CA généré expirera dans 30 jours, date à laquelle la configuration de sécurité devra être supprimée et recréée pour continuer à être utilisée.
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": true, "EnableAtRestEncryption": false, "InTransitEncryptionConfiguration": { "TLSCertificateConfiguration": { "CertificateProviderType": "EMR", "AwsKmsKey": "arn:aws:kms:us-east-2:123456789012:key/12345678-1234-1234-1234-123456789012", "SecretTags": [{"Key": "cluster-type", "Value": "test"}], "WildcardDnsSuffix": "us-east-2.compute.amazonaws.com", "ValidityInDays": 30 } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est activé et le chiffrement des données au repos est désactivé.
-
Un fichier zip contenant les certificats dans Amazon S3 est utilisé en tant que fournisseur de clés (voir Fournir des certificats de chiffrement des données en transit avec le chiffrement Amazon EMR pour les exigences relatives aux certificats).
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": true, "EnableAtRestEncryption": false, "InTransitEncryptionConfiguration": { "TLSCertificateConfiguration": { "CertificateProviderType": "PEM", "S3Object": "s3://MyConfigStore/artifacts/MyCerts.zip" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est activé et le chiffrement des données au repos est désactivé.
-
Un fournisseur de clés personnalisé est utilisé (voir Fournir des certificats de chiffrement des données en transit avec le chiffrement Amazon EMR pour les exigences relatives aux certificats).
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": true, "EnableAtRestEncryption": false, "InTransitEncryptionConfiguration": { "TLSCertificateConfiguration": { "CertificateProviderType": "Custom", "S3Object": "s3://MyConfig/artifacts/MyCerts.jar", "CertificateProviderClass": "com.mycompany.MyCertProvider" } } } }'
Exemple d'options de chiffrement des données au repos
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est désactivé et le chiffrement des données au repos est activé.
-
SSE-S3 est utilisé pour le chiffrement Amazon S3.
-
Le chiffrement du disque local est utilisé AWS KMS comme fournisseur de clés.
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": false, "EnableAtRestEncryption": true, "AtRestEncryptionConfiguration": { "S3EncryptionConfiguration": { "EncryptionMode": "SSE-S3" }, "LocalDiskEncryptionConfiguration": { "EncryptionKeyProviderType": "AwsKms", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est activé et fait référence à un fichier zip contenant des certificats PEM dans Amazon S3, à l'aide de l'ARN.
-
SSE-KMS est utilisé pour le chiffrement Amazon S3.
-
Le chiffrement du disque local est utilisé AWS KMS comme fournisseur de clés.
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": true, "EnableAtRestEncryption": true, "InTransitEncryptionConfiguration": { "TLSCertificateConfiguration": { "CertificateProviderType": "PEM", "S3Object": "arn:aws:s3:::MyConfigStore/artifacts/MyCerts.zip" } }, "AtRestEncryptionConfiguration": { "S3EncryptionConfiguration": { "EncryptionMode": "SSE-KMS", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" }, "LocalDiskEncryptionConfiguration": { "EncryptionKeyProviderType": "AwsKms", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est activé à l'aide EMR-managed des certificats Amazon, en spécifiant une clé KMS client et des balises pour la création du secret et en les ajoutant
*.mydomain.comà la liste SAN des certificats créés. -
CSE-KMS est utilisé pour le chiffrement Amazon S3.
-
Le chiffrement de disque local utilise un fournisseur de clés personnalisé référencé par son ARN.
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": true, "EnableAtRestEncryption": true, "InTransitEncryptionConfiguration": { "TLSCertificateConfiguration": { "CertificateProviderType": "EMR", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012", "SecretTags": [{"Key": "cluster-type", "Value": "test"}], "WildcardDnsSuffix": "mydomain.com" } }, "AtRestEncryptionConfiguration": { "S3EncryptionConfiguration": { "EncryptionMode": "CSE-KMS", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" }, "LocalDiskEncryptionConfiguration": { "EncryptionKeyProviderType": "Custom", "S3Object": "arn:aws:s3:::artifacts/MyKeyProvider.jar", "EncryptionKeyProviderClass": "com.mycompany.MyKeyProvider" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est activé avec un fournisseur de clés personnalisé.
-
CSE-Custom est utilisé pour les données Amazon S3.
-
Le chiffrement de disque local utilise un fournisseur de clés personnalisé.
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": "true", "EnableAtRestEncryption": "true", "InTransitEncryptionConfiguration": { "TLSCertificateConfiguration": { "CertificateProviderType": "Custom", "S3Object": "s3://MyConfig/artifacts/MyCerts.jar", "CertificateProviderClass": "com.mycompany.MyCertProvider" } }, "AtRestEncryptionConfiguration": { "S3EncryptionConfiguration": { "EncryptionMode": "CSE-Custom", "S3Object": "s3://MyConfig/artifacts/MyCerts.jar", "EncryptionKeyProviderClass": "com.mycompany.MyKeyProvider" }, "LocalDiskEncryptionConfiguration": { "EncryptionKeyProviderType": "Custom", "S3Object": "s3://MyConfig/artifacts/MyCerts.jar", "EncryptionKeyProviderClass": "com.mycompany.MyKeyProvider" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est désactivé et le chiffrement des données au repos est activé.
-
Le chiffrement Amazon S3 est activé avec SSE-KMS.
-
Plusieurs AWS KMS clés sont utilisées, une par compartiment S3, et des exceptions de chiffrement sont appliquées à ces compartiments S3 individuels.
-
Le chiffrement de disque local est désactivé.
aws emr create-security-configuration --name "MySecConfig" --security-configuration '{ "EncryptionConfiguration": { "AtRestEncryptionConfiguration": { "S3EncryptionConfiguration": { "EncryptionMode": "SSE-KMS", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012", "Overrides": [ { "BucketName": "amzn-s3-demo-bucket1", "EncryptionMode": "SSE-S3" }, { "BucketName": "amzn-s3-demo-bucket2", "EncryptionMode": "CSE-KMS", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" }, { "BucketName": "amzn-s3-demo-bucket3", "EncryptionMode": "SSE-KMS", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" } ] } }, "EnableInTransitEncryption": false, "EnableAtRestEncryption": true } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est désactivé et le chiffrement des données au repos est activé.
-
Le chiffrement Amazon S3 est activé SSE-S3 et le chiffrement du disque local est désactivé.
aws emr create-security-configuration --name "MyS3EncryptionConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": false, "EnableAtRestEncryption": true, "AtRestEncryptionConfiguration": { "S3EncryptionConfiguration": { "EncryptionMode": "SSE-S3" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est désactivé et le chiffrement des données au repos est activé.
-
Le chiffrement du disque local est activé en AWS KMS tant que fournisseur de clés et le chiffrement Amazon S3 est désactivé.
aws emr create-security-configuration --name "MyLocalDiskEncryptionConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": false, "EnableAtRestEncryption": true, "AtRestEncryptionConfiguration": { "LocalDiskEncryptionConfiguration": { "EncryptionKeyProviderType": "AwsKms", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" } } } }'
L'exemple suivant illustre le scénario suivant :
-
In-transit le chiffrement des données est désactivé et le chiffrement des données au repos est activé.
-
Le chiffrement du disque local est activé en AWS KMS tant que fournisseur de clés et le chiffrement Amazon S3 est désactivé.
-
Le chiffrement EBS est activé.
aws emr create-security-configuration --name "MyLocalDiskEncryptionConfig" --security-configuration '{ "EncryptionConfiguration": { "EnableInTransitEncryption": false, "EnableAtRestEncryption": true, "AtRestEncryptionConfiguration": { "LocalDiskEncryptionConfiguration": { "EnableEbsEncryption": true, "EncryptionKeyProviderType": "AwsKms", "AwsKmsKey": "arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" } } } }'
L'exemple suivant illustre le scénario suivant :
SSE-EMR-WAL est utilisé pour le chiffrement EMR WAL
aws emr create-security-configuration --name "MySecConfig" \ --security-configuration '{ "EncryptionConfiguration": { "EMRWALEncryptionConfiguration":{ }, "EnableInTransitEncryption":false, "EnableAtRestEncryption":false } }'
EnableInTransitEncryptionet pourrait EnableAtRestEncryption toujours être vrai, si vous souhaitez activer le chiffrement associé.
L'exemple suivant illustre le scénario suivant :
SSE-KMS-WAL est utilisé pour le chiffrement EMR WAL
Le chiffrement côté serveur est utilisé AWS Key Management Service comme fournisseur de clés
aws emr create-security-configuration --name "MySecConfig" \ --security-configuration '{ "EncryptionConfiguration": { "EMRWALEncryptionConfiguration":{ "AwsKmsKey":"arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012" }, "EnableInTransitEncryption":false, "EnableAtRestEncryption":false } }'
EnableInTransitEncryptionet pourrait EnableAtRestEncryption toujours être vrai, si vous souhaitez activer le chiffrement associé.
Référence JSON pour les paramètres de chiffrement
Le tableau suivant répertorie les paramètres JSON à définir pour le chiffrement et décrit les valeurs acceptables pour chacun d'eux.
| Paramètre | Description |
|---|---|
"EnableInTransitEncryption" :
true | false |
Spécifiez true pour activer le chiffrement en transit et false pour le désactiver. S'il est omis, false est utilisé par défaut, et le chiffrement en transit est désactivé. |
"EnableAtRestEncryption": true |
false |
Spécifiez true pour activer le chiffrement au repos et false pour le désactiver. S'il est omis, false est utilisé par défaut, et le chiffrement au repos est désactivé. |
| In-transit paramètres de chiffrement | |
"InTransitEncryptionConfiguration" : |
Spécifie une collection de valeurs utilisées pour configurer le chiffrement en transit quand EnableInTransitEncryption est true. |
"CertificateProviderType": "EMR" |
"PEM" |
"Custom" |
Spécifie s'il faut utiliser des certificats EMR créés et gérés, PEM des certificats référencés par un fichier compressé ou un fournisseur de Custom certificats. S'il PEM est spécifié, S3Object il doit s'agir d'une référence à l'emplacement dans Amazon S3 d'un fichier zip contenant les certificats. S'il Custom est spécifié, S3Object il doit s'agir d'une référence à l'emplacement d'un fichier JAR dans Amazon S3, suivie d'une CertificateProviderClass entrée. |
"S3Object" :
" |
" |
Fournit l'emplacement dans Amazon S3 d'un fichier zip lorsqu'il PEM est spécifié, ou d'un fichier JAR lorsque cela Custom est spécifié. Le format peut être un chemin d'accès (par exemple, s3://MyConfig/artifacts/CertFiles.zip) ou un ARN (par exemple, arn:aws:s3:::Code/MyCertProvider.jar). Si un fichier zip est spécifié, il doit comporter les fichiers nommés privateKey.pem et certificateChain.pem. Un fichier nommé trustedCertificates.pem est facultatif. |
"CertificateProviderClass" :
" |
Obligatoire uniquement si cela Custom est spécifié pourCertificateProviderType. spécifie un nom de classe complet déclaré dans le fichier JAR, qui implémente l' TLSArtifactsProvider interface. Par exemple, com.mycompany.MyCertProvider. |
"AwsKmsKey" :
" |
Facultatif, uniquement si cela EMR est spécifié pourCertificateProviderType. Une clé gérée par le client pour télécharger le certificat CA créé sur. AWS Secrets Managerdoit être un ARN entièrement spécifié pour une clé (par exemple,arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-456789012123). |
"SecretTags" :
[{"Key":"mykey","Value":"myvalue"}] |
Facultatif, uniquement si cela EMR est spécifié pourCertificateProviderType. Balises à ajouter au certificat CA créé dans AWS Secrets Manager. Pour inclure ce champ, l'appelant doit disposer d'secretsmanager:TagResourceautorisations. |
"ValidityInDays" :
|
Facultatif, uniquement si cela EMR est spécifié pourCertificateProviderType. Combien de jours les certificats créés seront valides, à compter de la date de création de la configuration de sécurité. Si ce n'est pas spécifié, la valeur par défaut est de 20 ans. |
"WildcardDnsSuffix" :
"mydomain.com" |
Facultatif, uniquement si cela EMR est spécifié pourCertificateProviderType. Un domaine à ajouter avec un préfixe générique à la liste SAN des certificats créés. Que cela soit spécifié ou non, le certificat sera toujours inclus *.ec2.internal dans us-east-1 *. et dans toutes les autres régions. |
| At-rest paramètres de chiffrement | |
"AtRestEncryptionConfiguration" : |
Spécifie un ensemble de valeurs pour le chiffrement au repos lorsqu'il EnableAtRestEncryption est activétrue, y compris le chiffrement Amazon S3 et le chiffrement du disque local. |
| Paramètres de chiffrement Amazon S3 | |
"S3EncryptionConfiguration" : |
Spécifie un ensemble de valeurs utilisées pour le chiffrement Amazon S3 avec le système de fichiers Amazon EMR (EMRFS). |
"EncryptionMode": "SSE-S3" |
"SSE-KMS" | "CSE-KMS" |
"CSE-Custom" |
Spécifie le type de chiffrement Amazon S3 à utiliser. Si elle SSE-S3 est spécifiée, aucune autre valeur de chiffrement Amazon S3 n'est requise. Si l'un SSE-KMS ou l'autre CSE-KMS est spécifié, un AWS KMS key ARN doit être spécifié comme AwsKmsKey valeur. Si CSE-Custom est défini, les valeurs S3Object et EncryptionKeyProviderClass doivent être spécifiées. |
"AwsKmsKey" :
" |
Obligatoire uniquement quand SSE-KMS ou CSE-KMS est spécifié pour EncryptionMode. doit être l'ARN complet d'une clé (par exemple, arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-123456789012). |
"S3Object" :
" |
Obligatoire uniquement lorsque CSE-Custom cela est spécifié pourCertificateProviderType. fournit l'emplacement d'un fichier JAR dans Amazon S3. Le format peut être un chemin d'accès (par exemple, s3://MyConfig/artifacts/MyKeyProvider.jar) ou un ARN (par exemple, arn:aws:s3:::Code/MyKeyProvider.jar). |
"EncryptionKeyProviderClass" :
" |
Obligatoire uniquement lorsque CSE-Custom cela est spécifié pourEncryptionMode. spécifie le nom complet d'une classe déclarée dans l'application qui implémente l' EncryptionMaterialsProviderinterface ; par exemple,. |
| Paramètres de chiffrement de disque local | |
"LocalDiskEncryptionConfiguration" |
Spécifie le fournisseur de clés et les valeurs correspondantes à utiliser pour le chiffrement de disque local. |
"EnableEbsEncryption": |
Spécifiez true pour activer le chiffrement EBS. Le chiffrement EBS chiffre le volume du périphérique racine EBS et les volumes de stockage associés. Pour utiliser le chiffrement EBS, vous devez spécifier AwsKms comme votreEncryptionKeyProviderType. |
"EncryptionKeyProviderType": "AwsKms" |
"Custom" |
Spécifie le fournisseur de clés. S'il AwsKms est spécifié, un ARN de clé KMS doit être spécifié comme AwsKmsKey valeur. Si Custom est défini, les valeurs S3Object et EncryptionKeyProviderClass doivent être spécifiées. |
"AwsKmsKey :
" |
Obligatoire uniquement lorsque AwsKms cela est spécifié pourType. doit être un ARN entièrement spécifié pour une clé (par exemple,arn:aws:kms:us-east-1:123456789012:key/12345678-1234-1234-1234-456789012123). |
"S3Object" :
" |
Obligatoire uniquement lorsque CSE-Custom cela est spécifié pourCertificateProviderType. fournit l'emplacement d'un fichier JAR dans Amazon S3. Le format peut être un chemin d'accès (par exemple, s3://MyConfig/artifacts/MyKeyProvider.jar) ou un ARN (par exemple, arn:aws:s3:::Code/MyKeyProvider.jar). |
|
|
Obligatoire uniquement lorsque Custom cela est spécifié pourType. spécifie le nom complet d'une classe déclarée dans l'application qui implémente l' EncryptionMaterialsProviderinterface ; par exemple,. |
| Paramètres de chiffrement EMR WAL | |
"EMRWALEncryptionConfiguration"
|
Spécifie la valeur du chiffrement EMR WAL. |
"AwsKmsKey"
|
Spécifie l'identifiant de clé CMK Arn. |
Configuration de l'authentification Kerberos
Une configuration de sécurité avec les paramètres Kerberos ne peut être utilisée que par un cluster créé avec des attributs Kerberos. Sinon, une erreur se produit. Pour de plus amples informations, veuillez consulter Utilisation de Kerberos pour l'authentification avec Amazon EMR. Kerberos est uniquement disponible dans Amazon EMR version 5.10.0 et versions ultérieures.
Spécification des paramètres Kerberos à l'aide de la console
Choisissez les options sous Kerberos authentication (Authentification Kerberos) en suivant les indications suivantes.
| Paramètre | Description | ||
|---|---|---|---|
|
Kerberos |
Spécifie que Kerberos est activé pour les clusters qui utilisent cette configuration de sécurité. Si un cluster utilise cette configuration de sécurité, les paramètres Kerberos doivent également être spécifiés sur le cluster, sinon une erreur se produira. |
||
|
Fournisseur |
Cluster-dedicated KDC |
Spécifie qu'Amazon EMR crée un KDC sur le nœud primaire de tout cluster utilisant cette configuration de sécurité. Vous spécifiez le nom de domaine et le mot de passe administrateur du KDC lorsque vous créez le cluster. Vous pouvez référencer ce KDC à partir d'autres clusters, si nécessaire. Créez ces clusters en utilisant une configuration de sécurité différente, spécifiez un KDC externe et utilisez le nom de domaine et le mot de passe administrateur du KDC que vous spécifiez pour le KDC dédié au cluster. |
|
|
KDC externe |
Disponible uniquement avec les versions Amazon EMR 5.20.0 et supérieures. Spécifie que les clusters utilisant cette configuration de sécurité authentifient les principaux Kerberos à l'aide d'un serveur KDC extérieur au cluster. Aucun KDC n'est créé sur le cluster. Lorsque vous créez le cluster, vous spécifiez le nom de domaine et le mot de passe d'administrateur du KDC pour le KDC externe. |
||
|
Durée de vie du billet |
Facultatif. Spécifie la période pendant laquelle un ticket Kerberos émis par le KDC est valide sur les clusters qui utilisent cette configuration de sécurité. La durée de vie des tickets est limitée pour des raisons de sécurité. Les applications et services de cluster renouvellent automatiquement les tickets après leur expiration. Les utilisateurs qui se connectent au cluster via SSH à l'aide d'informations d'identification Kerberos doivent exécuter |
||
|
Cross-realm confiance |
Spécifie une confiance inter-domaines entre un KDC dédié au cluster sur des clusters utilisant cette configuration de sécurité et un KDC dans un autre domaine Kerberos. Les principaux (généralement les utilisateurs) d'un autre domaine sont authentifiés auprès des clusters qui utilisent cette configuration. Une configuration supplémentaire dans l'autre domaine Kerberos est requise. Pour de plus amples informations, veuillez consulter Didacticiel : configuration d'une approbation inter-domaines avec un domaine Active Directory. |
||
| Cross-realm propriétés fiduciaires |
Domaine |
Spécifie le nom de domaine Kerberos de l'autre domaine inclus dans la relation d'approbation. Par convention, les noms de domaine Kerberos sont identiques au nom de domaine, mais en majuscules. |
|
|
Domaine |
Spécifie le nom de domaine de l'autre domaine de la relation d'approbation. |
||
|
Serveur d'administration |
Spécifie le FQDN (nom de domaine complet) ou l'adresse IP du serveur d'administration de l'autre domaine inclus dans la relation d'approbation. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais communiquent sur différents ports. Si aucun port n'est spécifié, le port 749 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
||
|
serveur KDC |
Spécifie le FQDN (nom de domaine complet) ou l'adresse IP du serveur KDC de l'autre domaine inclus dans la relation d'approbation. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais utilisent des ports différents. Si aucun port n'est spécifié, le port 88 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
||
|
KDC externe |
Spécifie que le KDC externe du cluster est utilisé par le cluster. |
||
| Propriétés de KDC externe |
Serveur d'administration |
Spécifie le nom de domaine complet (FQDN) ou l'adresse IP du serveur d'administration externe. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais communiquent sur différents ports. Si aucun port n'est spécifié, le port 749 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
|
|
serveur KDC |
Spécifie le nom de domaine complet (FQDN) du serveur KDC externe. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais utilisent des ports différents. Si aucun port n'est spécifié, le port 88 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
||
|
Intégration d'Active Directory |
Spécifie que l'authentification principale Kerberos est intégrée à un domaine Microsoft Active Directory. |
||
|
Propriétés de l'intégration d'Active Directory |
Domaine Active Directory |
Spécifie le nom de domaine Kerberos du domaine Active Directory. Par convention, les noms de domaine Kerberos sont généralement identiques au nom de domaine, mais en majuscules. |
|
|
Domaine Active Directory |
Spécifie le nom du domaine Active Directory. |
||
|
Serveur Active Directory |
Spécifie le nom de domaine complet (FQDN) du contrôleur de domaine Microsoft Active Directory. |
||
Spécification des paramètres Kerberos à l'aide du AWS CLI
Le tableau suivant montre les paramètres JSON de référence pour les paramètres Kerberos dans une configuration de sécurité. Pour des exemples de configurations, consultez Exemples de configuration.
| Paramètre | Description | |||||
|---|---|---|---|---|---|---|
|
|
Nécessaire pour Kerberos. Spécifie qu'une configuration d'authentification fait partie de cette configuration de sécurité. |
|||||
|
|
Nécessaire pour Kerberos. Spécifie les propriétés de configuration de Kerberos. |
||||
|
|
|
||||
"ClusterDedicatedKdcConfiguration": { |
Obligatoire lorsque |
|||||
|
Facultatif. Spécifie la période pendant laquelle un ticket Kerberos émis par le KDC est valide sur les clusters qui utilisent cette configuration de sécurité. La durée de vie des tickets est limitée pour des raisons de sécurité. Les applications et services de cluster renouvellent automatiquement les tickets après leur expiration. Les utilisateurs qui se connectent au cluster via SSH à l'aide d'informations d'identification Kerberos doivent exécuter |
|||||
|
|
Spécifie une confiance inter-domaines entre un KDC dédié au cluster sur des clusters utilisant cette configuration de sécurité et un KDC dans un autre domaine Kerberos. Les principaux (généralement les utilisateurs) d'un autre domaine sont authentifiés auprès des clusters qui utilisent cette configuration. Une configuration supplémentaire dans l'autre domaine Kerberos est requise. Pour de plus amples informations, veuillez consulter Didacticiel : configuration d'une approbation inter-domaines avec un domaine Active Directory. |
|||||
|
|
Spécifie le nom de domaine Kerberos de l'autre domaine inclus dans la relation d'approbation. Par convention, les noms de domaine Kerberos sont identiques au nom de domaine, mais en majuscules. |
|||||
|
|
Spécifie le nom de domaine de l'autre domaine de la relation d'approbation. |
|||||
|
|
Spécifie le FQDN (nom de domaine complet) ou l'adresse IP du serveur d'administration de l'autre domaine inclus dans la relation d'approbation. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais communiquent sur différents ports. Si aucun port n'est spécifié, le port 749 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
|||||
|
|
Spécifie le FQDN (nom de domaine complet) ou l'adresse IP du serveur KDC de l'autre domaine inclus dans la relation d'approbation. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais utilisent des ports différents. Si aucun port n'est spécifié, le port 88 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
|||||
|
|
||||||
|
|
||||||
|
"ExternalKdcConfiguration": { |
Obligatoire lorsque |
|||||
|
Facultatif. Spécifie la période pendant laquelle un ticket Kerberos émis par le KDC est valide sur les clusters qui utilisent cette configuration de sécurité. La durée de vie des tickets est limitée pour des raisons de sécurité. Les applications et services de cluster renouvellent automatiquement les tickets après leur expiration. Les utilisateurs qui se connectent au cluster via SSH à l'aide d'informations d'identification Kerberos doivent exécuter |
|||||
|
Spécifie qu'un seul serveur KDC est référencé. |
|||||
|
"AdminServer": " |
Spécifie le nom de domaine complet (FQDN) ou l'adresse IP du serveur d'administration externe. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais communiquent sur différents ports. Si aucun port n'est spécifié, le port 749 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
|||||
|
"KdcServer": " |
Spécifie le nom de domaine complet (FQDN) du serveur KDC externe. Le serveur d'administration et le serveur KDC s'exécutent généralement sur le même poste avec le même FQDN, mais utilisent des ports différents. Si aucun port n'est spécifié, le port 88 est utilisé (port Kerberos par défaut). Le cas échéant, vous pouvez spécifier le port (par exemple, |
|||||
|
|
Spécifie que l'authentification principale Kerberos est intégrée à un domaine Microsoft Active Directory. |
|||||
|
|
Spécifie le nom de domaine Kerberos du domaine Active Directory. Par convention, les noms de domaine Kerberos sont généralement identiques au nom de domaine, mais en majuscules. |
||||
|
|
Spécifie le nom du domaine Active Directory. |
|||||
|
|
Spécifie le nom de domaine complet (FQDN) du contrôleur de domaine Microsoft Active Directory. |
|||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
Configuration de rôles IAM pour les demandes EMRFS à Amazon S3
Les rôles IAM pour EMRFS vous permettent de fournir différentes autorisations pour les données EMRFS dans Amazon S3. Vous créez des mappages qui spécifient un rôle IAM utilisé pour les autorisations lorsqu'une demande d'accès contient un identificateur que vous spécifiez. L'identificateur peut être un utilisateur ou un rôle Hadoop, ou bien un préfixe Amazon S3.
Pour de plus amples informations, veuillez consulter Configuration de rôles IAM pour les demandes EMRFS à Amazon S3.
Spécification des rôles IAM pour EMRFS à l'aide du AWS CLI
Vous trouverez ci-dessous un exemple d'extrait JSON permettant de spécifier des rôles IAM personnalisés pour EMRFS dans une configuration de sécurité. Il montre les mappages de rôles pour les trois types d'identifiants différents, suivis d'une référence de paramètre.
{ "AuthorizationConfiguration": { "EmrFsConfiguration": { "RoleMappings": [{ "Role": "arn:aws:iam::123456789101:role/allow_EMRFS_access_for_user1", "IdentifierType": "User", "Identifiers": [ "user1" ] },{ "Role": "arn:aws:iam::123456789101:role/allow_EMRFS_access_to_demo_s3_buckets", "IdentifierType": "Prefix", "Identifiers": [ "s3://amzn-s3-demo-bucket1/","s3://amzn-s3-demo-bucket2/" ] },{ "Role": "arn:aws:iam::123456789101:role/allow_EMRFS_access_for_AdminGroup", "IdentifierType": "Group", "Identifiers": [ "AdminGroup" ] }] } } }
| Paramètre | Description |
|---|---|
|
|
Obligatoire. |
|
|
Obligatoire. Contient des mappages de rôles. |
|
|
Obligatoire. Contient une ou plusieurs définitions de mappage de rôles. Les mappages de rôles sont évalués dans l'ordre d'apparition du haut vers le bas. Si un mappage de rôle est considéré comme vrai pour un appel de données EMRFS dans Amazon S3, aucun autre mappage de rôle n'est évalué et EMRFS utilise le rôle IAM spécifié pour la demande. Les mappages de rôles sont constitués des paramètres obligatoires suivants : |
|
Spécifie l'identifiant ARN d'un rôle IAM au format |
|
Les valeurs suivantes sont possibles :
|
|
|
Spécifie un ou plusieurs identifiants du type d'identifiant approprié. Séparez les identifiants multiples par des virgules sans espace. |
Configuration des demandes de service de métadonnées aux instances Amazon EC2
Les métadonnées d'instance sont des données portant sur votre instance que vous pouvez utiliser pour configurer ou gérer l'instance en cours d'exécution. Vous pouvez accéder aux métadonnées d’instance à partir d’une instance en cours d’exécution en utilisant l’une des méthodes suivantes :
-
Service de métadonnées d'instance version 1 (IMDSv1) - une méthode request/response
-
Service des métadonnées d'instance Version 2 (IMDSv2) – méthode orientée session
Alors qu'Amazon EC2 prend en charge à la fois IMDSv1 et IMDSv2, Amazon EMR prend en charge IMDSv2 dans Amazon EMR 5.23.1, 5.27.1, 5.32 ou version ultérieure, et 6.2 ou version ultérieure. Dans ces versions, les composants Amazon EMR utilisent IMDSv2 pour tous les appels IMDS. Pour les appels IMDS dans le code de votre application, vous pouvez utiliser à la fois IMDSv1 et IMDSv2, ou configurer l'IMDS pour utiliser uniquement IMDSv2 pour une sécurité accrue. Lorsque vous spécifiez que IMDSv2 doit être utilisé, IMDSv1 ne fonctionne plus.
Pour plus d'informations, consultez Configurer le service de métadonnées d'instance dans le guide de l'utilisateur Amazon EC2.
Note
Dans les versions antérieures d'Amazon EMR 5.x ou 6.x, la désactivation d'IMDSv1 entraînait l'échec du démarrage du cluster, car les composants Amazon EMR utilisaient IMDSv1 pour tous les appels IMDS. Lorsque vous désactivez IMDSv1, assurez-vous que tout logiciel personnalisé utilisant IMDSv1 est mis à jour vers IMDSv2.
Spécification de la configuration du service de métadonnées d'instance à l'aide du AWS CLI
Vous trouverez ci-dessous un exemple d'extrait JSON pour spécifier le service de métadonnées d'instance (IMDS) d'Amazon EC2 dans une configuration de sécurité. L'utilisation d'une configuration de sécurité personnalisée est facultative.
{ "InstanceMetadataServiceConfiguration" : { "MinimumInstanceMetadataServiceVersion": integer, "HttpPutResponseHopLimit": integer } }
| Paramètre | Description |
|---|---|
|
|
Si vous ne spécifiez pas l'IMDS dans une configuration de sécurité et que vous utilisez une version d'Amazon EMR qui nécessite IMDSv1, Amazon EMR utilise par défaut IMDSv1 comme version minimale du service de métadonnées d'instance. Si vous souhaitez utiliser votre propre configuration, les deux paramètres suivants sont obligatoires. |
|
|
Obligatoire. Spécifiez |
|
|
Obligatoire. Limite de saut de réponse HTTP PUT souhaitée pour les requêtes de métadonnées d'instance. Plus le nombre est élevé, plus les demandes de métadonnées d'instance peuvent être envoyées. Valeur par défaut : |
Spécification de la configuration du service de métadonnées d'instance à l'aide de la console
Vous pouvez configurer l'utilisation d'IMDS pour un cluster lorsque vous le lancez depuis la console Amazon EMR.
Pour configurer l'utilisation d'IMDS à l'aide de la console :
-
Lorsque vous créez une nouvelle configuration de sécurité sur la page Configurations de sécurité, sélectionnez Configurer le service de métadonnées d'instance EC2 sous le paramètre Service de métadonnées d'instance EC2. Cette configuration est prise en charge uniquement dans Amazon EMR 5.23.1, 5.27.1, 5.32 ou version ultérieure, et 6.2 ou version ultérieure.
-
Pour l'option Version minimale du service de métadonnées d'instance, sélectionnez l'une des options suivantes :
-
Désactiver IMDSv1 et autoriser uniquement IMDSv2, si vous voulez autoriser uniquement IMDSv2 sur ce cluster. Consultez la section Transition vers l'utilisation du service de métadonnées d'instance version 2 dans le guide de l'utilisateur Amazon EC2.
-
Autoriser IMDSv1 et IMDSv2 sur le cluster, si vous voulez autoriser IMDSv1 et IMDSv2 orienté session sur ce cluster.
-
-
Pour IMDSv2, vous pouvez également configurer le nombre de sauts de réseau à réseau autorisés pour le jeton de métadonnées en définissant la limite de sauts de réponse put HTTP sur un entier compris entre
1et64.
Pour plus d'informations, consultez Configurer le service de métadonnées d'instance dans le guide de l'utilisateur Amazon EC2.
Consultez Configurer les détails de l'instance et Configurer le service de métadonnées de l'instance dans le guide de l'utilisateur Amazon EC2.