Intégration d’Amazon S3 Tables aux services d’analytique AWS

1. Ouvrez la console Amazon S3 sur https://console.aws.amazon.com/s3/.

2. Dans le volet de navigation de gauche, choisissez Compartiments de tables.

3. Choisissez Créer un compartiment de tables.

   La page Créer un compartiment de tables s’ouvre.

4. Saisissez un Nom du compartiment de table et veillez à ce que la case Activer l’intégration soit cochée.

5. Choisissez Créer un compartiment de tables. Amazon S3 essaiera d’intégrer automatiquement vos compartiments de tables dans cette région.

Pour intégrer des compartiments de tables à l’aide de l’AWS CLI

Les étapes suivantes montrent comment utiliser l’AWS CLI pour intégrer des compartiments de table. Pour utiliser ces étapes, remplacez les user input placeholders par vos propres informations.

1. Créez un compartiment de tables.

   aws s3tables create-table-bucket \
   --region us-east-1 \
   --name amzn-s3-demo-table-bucket

2. Créez un rôle de service IAM qui permet à Lake Formation d’accéder à vos ressources de table.

   1. Créez un fichier Role-Trust-Policy.json contenant la stratégie d’approbation suivante :

      JSON

      {
          "Version":"2012-10-17",		 	 	 
          "Statement": [
            {
              "Sid": "LakeFormationDataAccessPolicy",
              "Effect": "Allow",
              "Principal": {
                "Service": "lakeformation.amazonaws.com"
              },
              "Action": [
                  "sts:AssumeRole",
                  "sts:SetContext",
                  "sts:SetSourceIdentity"
              ],
              "Condition": {
                "StringEquals": {
                  "aws:SourceAccount": "111122223333"
                }
              }
            }
          ]
      }
      

      Créez le rôle de service IAM à l’aide de la commande suivante :

      aws iam create-role \
      --role-name S3TablesRoleForLakeFormation \
      --assume-role-policy-document file://Role-Trust-Policy.json                

   2. Créez un fichier LF-GluePolicy.json contenant la stratégie suivante :

      JSON

      {
          "Version":"2012-10-17",		 	 	 
          "Statement": [
              {
                  "Sid": "LakeFormationPermissionsForS3ListTableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:ListTableBuckets"
                  ],
                  "Resource": [
                      "*"
                  ]
              },
              {
                  "Sid": "LakeFormationDataAccessPermissionsForS3TableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:CreateTableBucket",
                      "s3tables:GetTableBucket",
                      "s3tables:CreateNamespace",
                      "s3tables:GetNamespace",
                      "s3tables:ListNamespaces",
                      "s3tables:DeleteNamespace",
                      "s3tables:DeleteTableBucket",
                      "s3tables:CreateTable",
                      "s3tables:DeleteTable",
                      "s3tables:GetTable",
                      "s3tables:ListTables",
                      "s3tables:RenameTable",
                      "s3tables:UpdateTableMetadataLocation",
                      "s3tables:GetTableMetadataLocation",
                      "s3tables:GetTableData",
                      "s3tables:PutTableData"
                  ],
                  "Resource": [
                      "arn:aws:s3tables:us-east-1:111122223333:bucket/*"
                  ]
              }
          ]
      }
      

      Attachez la stratégie au rôle en utilisant la commande suivante :

      aws iam put-role-policy \
      --role-name S3TablesRoleForLakeFormation  \
      --policy-name LakeFormationDataAccessPermissionsForS3TableBucket \
      --policy-document file://LF-GluePolicy.json

3. Créez un fichier input.json contenant ce qui suit :

   {
       "ResourceArn": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
   
       "WithFederation": true,
       "RoleArn": "arn:aws:iam::111122223333:role/S3TablesRoleForLakeFormation"
   }                

   Enregistrez les compartiments de table auprès de Lake Formation en utilisant la commande suivante :

   aws lakeformation register-resource \
   --region us-east-1 \
   --with-privileged-access \
   --cli-input-json file://input.json

4. Créez un fichier catalog.json contenant le catalogue qui suit :

   {
      "Name": "s3tablescatalog",
      "CatalogInput": {
         "FederatedCatalog": {
             "Identifier": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
             "ConnectionName": "aws:s3tables"
          },
          "CreateDatabaseDefaultPermissions":[],
          "CreateTableDefaultPermissions":[],
          "AllowFullTableExternalDataAccess": "True"
      }
   }     

   Créez le catalogue s3tablescatalog à l’aide de la ligne de commande suivante. La création de ce catalogue remplit le AWS Glue Data Catalog avec des objets correspondant aux compartiments de table, aux espaces de noms et aux tables.

   aws glue create-catalog \
   --region us-east-1 \
   --cli-input-json file://catalog.json

5. Vérifiez que le catalogue s3tablescatalog a été ajouté dans AWS Glue à l’aide de la commande suivante :

   aws glue get-catalog --catalog-id s3tablescatalog

1. Ouvrez la console AWS Lake Formation à l’adresse https://console.aws.amazon.com/lakeformation/ et connectez-vous en tant qu’administrateur du lac de données. Pour plus d’informations sur la manière de créer un administrateur de lac de données, consultez Création d’un administrateur de lac de données dans le Guide du développeur AWS Lake Formation.

2. Supprimez le catalogue s3tablescatalog en procédant comme suit :

   • Dans le volet de navigation de gauche, choisissez Catalogues.

   • Sélectionnez le bouton d’option situé à côté du catalogue s3tablescatalog dans la liste Catalogues. Dans le menu Actions, sélectionnez Delete (Supprimer).

3. Désenregistrez l’emplacement des données du catalogue s3tablescatalog en procédant comme suit :

   • Dans le volet de navigation de gauche, accédez à la section Administration, puis choisissez Emplacements de lac de données.

   • Choisissez le bouton d’option en regard de l’emplacement du lac de données s3tablescatalog, par exemple s3://tables:region:account-id:bucket/*.

   • Dans le menu Actions, choisissez Supprimer.

   • Dans la boîte de dialogue de confirmation qui s’affiche, choisissez Supprimer.

4. Maintenant que vous avez supprimé l’emplacement de votre catalogue s3tablescatalog et de votre lac de données, vous pouvez suivre les étapes pour intégrer vos compartiments de table aux services d’analytique AWS en utilisant le processus d’intégration mis à jour.