Utilisation d'Amazon S3 Tables avec des services AWS d'analyse

1. Ouvrez la console Amazon S3 à l'adresse https://console.aws.amazon.com/s3/.

2. Dans le volet de navigation de gauche, choisissez Compartiments de tables.

3. Choisissez Créer un compartiment de tables.

   La page Créer un compartiment de tables s’ouvre.

4. Entrez le nom du bucket Table et assurez-vous que la case Activer l'intégration est cochée.

5. Choisissez Créer un compartiment de tables. Amazon S3 essaiera d’intégrer automatiquement vos compartiments de tables dans cette région.

Pour intégrer des seaux de table à l'aide du AWS CLI

Les étapes suivantes montrent comment utiliser le AWS CLI pour intégrer des compartiments de table. Pour suivre ces étapes, remplacez-les user input placeholders par vos propres informations.

1. Créez un compartiment de tables.

   aws s3tables create-table-bucket \
   --region us-east-1 \
   --name amzn-s3-demo-table-bucket

2. Créez un rôle de service IAM qui permet à Lake Formation d’accéder à vos ressources de table.

   1. Créez un fichier appelé Role-Trust-Policy.json contenant la politique de confiance suivante :

      {
          "Version": "2012-10-17",
          "Statement": [
            {
              "Sid": "LakeFormationDataAccessPolicy",
              "Effect": "Allow",
              "Principal": {
                "Service": "lakeformation.amazonaws.com"
              },
              "Action": [
                  "sts:AssumeRole",
                  "sts:SetContext",
                  "sts:SetSourceIdentity"
              ],
              "Condition": {
                "StringEquals": {
                  "aws:SourceAccount": "111122223333"
                }
              }
            }
          ]
      }

      Créez le rôle de service IAM à l'aide de la commande suivante :

      aws iam create-role \
      --role-name S3TablesRoleForLakeFormation \
      --assume-role-policy-document file://Role-Trust-Policy.json                

   2. Créez un fichier appelé LF-GluePolicy.json contenant la politique suivante :

      {
          "Version": "2012-10-17",
          "Statement": [
              {
                  "Sid": "LakeFormationPermissionsForS3ListTableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:ListTableBuckets"
                  ],
                  "Resource": [
                      "*"
                  ]
              },
              {
                  "Sid": "LakeFormationDataAccessPermissionsForS3TableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:CreateTableBucket",
                      "s3tables:GetTableBucket",
                      "s3tables:CreateNamespace",
                      "s3tables:GetNamespace",
                      "s3tables:ListNamespaces",
                      "s3tables:DeleteNamespace",
                      "s3tables:DeleteTableBucket",
                      "s3tables:CreateTable",
                      "s3tables:DeleteTable",
                      "s3tables:GetTable",
                      "s3tables:ListTables",
                      "s3tables:RenameTable",
                      "s3tables:UpdateTableMetadataLocation",
                      "s3tables:GetTableMetadataLocation",
                      "s3tables:GetTableData",
                      "s3tables:PutTableData"
                  ],
                  "Resource": [
                      "arn:aws:s3tables:us-east-1:111122223333:bucket/*"
                  ]
              }
          ]
      }

      Associez la politique au rôle à l'aide de la commande suivante :

      aws iam put-role-policy \
      --role-name S3TablesRoleForLakeFormation  \
      --policy-name LakeFormationDataAccessPermissionsForS3TableBucket \
      --policy-document file://LF-GluePolicy.json

3. Créez un fichier appelé input.json contenant les éléments suivants :

   {
       "ResourceArn": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
   
       "WithFederation": true,
       "RoleArn": "arn:aws:iam::111122223333:role/S3TablesRoleForLakeFormation"
   }                

   Enregistrez des seaux de table auprès de Lake Formation à l'aide de la commande suivante :

   aws lakeformation register-resource \
   --region us-east-1 \
   --with-privileged-access \
   --cli-input-json file://input.json

4. Créez un fichier appelé catalog.json contenant le catalogue suivant :

   {
      "Name": "s3tablescatalog",
      "CatalogInput": {
         "FederatedCatalog": {
             "Identifier": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
             "ConnectionName": "aws:s3tables"
          },
          "CreateDatabaseDefaultPermissions":[],
          "CreateTableDefaultPermissions":[],
          "AllowFullTableExternalDataAccess": "True"
      }
   }     

   Créez le s3tablescatalog catalogue à l'aide de la commande suivante. La création de ce catalogue remplit le AWS Glue Data Catalog avec des objets correspondant à des compartiments de tables, à des espaces de noms et à des tables.

   aws glue create-catalog \
   --region us-east-1 \
   --cli-input-json file://catalog.json

5. Vérifiez que le s3tablescatalog catalogue a été ajouté à AWS Glue l'aide de la commande suivante :

   aws glue get-catalog --catalog-id s3tablescatalog

1. Ouvrez la AWS Lake Formation console sur https://console.aws.amazon.com/lakeformation/ et connectez-vous en tant qu'administrateur du lac de données. Pour plus d'informations sur la création d'un administrateur de lac de données, voir Création d'un administrateur de lac de données dans le guide du AWS Lake Formation développeur.

2. Supprimez votre s3tablescatalog catalogue en procédant comme suit :

   • Dans le volet de navigation de gauche, sélectionnez Catalogues.

   • Sélectionnez le bouton d'option situé à côté du s3tablescatalog catalogue dans la liste des catalogues. Dans le menu Actions, sélectionnez Delete (Supprimer).

3. Désenregistrez l'emplacement des données du s3tablescatalog catalogue en procédant comme suit :

   • Dans le volet de navigation de gauche, accédez à la section Administration, puis choisissez Data lake locations.

   • Sélectionnez le bouton d'option à côté de l'emplacement du lac de s3tablescatalog données, par exemple,s3://tables:region:account-id:bucket/*.

   • Dans le menu Actions, choisissez Supprimer.

   • Dans la boîte de dialogue de confirmation qui apparaît, choisissez Supprimer.

4. Maintenant que vous avez supprimé l'emplacement de votre s3tablescatalog catalogue et de votre lac de données, vous pouvez suivre les étapes pour intégrer vos compartiments de tables aux services AWS d'analyse en utilisant le processus d'intégration mis à jour.