Konfigurieren eines Null-ETL-Integrationsziels

Bei der Konfiguration eines Ziels für eine Null-ETL-Integration stehen über AWS mehrere Optionen zur Verfügung. Das Ziel kann ein verschlüsseltes Amazon Redshift-Data-Warehouse oder ein Amazon-SageMaker-Lakehouse-Katalog sein.

Bevor Sie das Ziel für die Null-ETL-Integration auswählen, müssen Sie eine der folgenden Zielressourcen konfigurieren.

Folgende sind Konfigurationsoptionen für ein Ziel in einer Null-ETL-Integration:

Konfiguerieren eines Amazon-SageMaker-Lakehouse-Katalogs mit regulärem Amazon-S3-Speicher

In diesem Abschnitt werden die Voraussetzungen und Einrichtungsschritte für die Konfiguration eines regulären Amazon-S3-Buckets als Speicher für Ihr Amazon-SageMaker-Lakehouse-Katalogziel in einer Null-ETL-Integration beschrieben.

Voraussetzungen für das Einrichten einer Integration

Bevor Sie eine Null-ETL-Integration mit einem Amazon-SageMaker-Lakehouse-Katalog unter Verwendung von normalem S3-Speicher erstellen, müssen Sie die folgenden Einrichtungsschritte durchführen:

Nachdem Sie den Amazon-SageMaker-Lakehouse-Katalog mit regulärem Amazon-S3-Speicher konfiguriert haben, können Sie die Konfigurieren der Integration mit Ihrem Ziel-Integrationseinrichtung abschließen.

Konfigurieren von Amazon S3 Tables als Ziel

In diesem Abschnitt werden die Voraussetzungen und Einrichtungsschritte für die Konfiguration von Amazon S3 Tables als Ziel für Ihre Null-ETL-Integration beschrieben.

Voraussetzungen für das Einrichten einer Integration

Bevor Sie eine Null-ETL-Integration mit Amazon S3 Tables als Ziel erstellen, müssen Sie die folgenden Einrichtungsschritte durchführen:

Richten Sie einen Amazon-S3-Tables-Bucket ein.

Geben Sie die RBAC-Richtlinie für den Katalog an.

Die folgenden Berechtigungen müssen der RBAC-Richtlinie für den Katalog hinzugefügt werden, um Integrationen zwischen der Quelle und dem Amazon-S3-Tables-Katalogziel zu ermöglichen.

Die Ressourcenrichtlinie für den AWS Glue-Zielkatalog muss Glue-Service-Berechtigungen für AuthorizeInboundIntegration enthalten. Darüber hinaus ist die CreateInboundIntegration-Berechtigung entweder für den Quellprinzipal, der die Integration erstellt, oder für die AWS Glue-Zielressourcenrichtlinie erforderlich.

JSON

{
  "Version":"2012-10-17",		 	 	 
  "Statement": [
    {
      "Principal": {
        "AWS": [
        	"arn:aws:iam::123456789012:user/Alice"
        ]
      },
      "Effect": "Allow",
      "Action": [
        "glue:CreateInboundIntegration"
      ],
      "Resource": [
	      "arn:aws:glue:us-east-1:111122223333:catalog/<s3tablescatalog>/*"
      ],
      "Condition": {
        "StringLike": {
        "aws:SourceArn": "arn:aws:dynamodb:us-east-1:444455556666:table/<table-name>"
        }
      }
    },
    {
      "Principal": {
        "Service": [
          "glue.amazonaws.com"
        ]
      },
      "Effect": "Allow",
      "Action": [
        "glue:AuthorizeInboundIntegration"
      ],
      "Resource": [
      "arn:aws:glue:us-east-1:111122223333:catalog/<s3tablescatalog>/*"
      ],
      "Condition": {
        "StringEquals": {
        "aws:SourceArn": "arn:aws:dynamodb:us-east-1:444455556666:table/<table-name>"
        }
      }
    }
  ]
}

Erstellen einer IAM-Zielrolle

Erstellen Sie eine IAM-Zielrolle mit den folgenden Berechtigungen und Vertrauensstellungen:

Beispiel für eine IAM-Richtlinie:

JSON

{
  "Version":"2012-10-17",		 	 	 
  "Statement": [
    {
      "Action": [
        "s3tables:ListTableBuckets",
        "s3tables:GetTableBucket",
        "s3tables:GetTableBucketEncryption",
        "s3tables:GetNamespace",
        "s3tables:CreateNamespace",
        "s3tables:ListNamespaces",
        "s3tables:CreateTable",
        "s3tables:GetTable",
        "s3tables:GetTableEncryption",
        "s3tables:ListTables",
        "s3tables:GetTableMetadataLocation",
        "s3tables:UpdateTableMetadataLocation",
        "s3tables:GetTableData",
        "s3tables:PutTableData"
      ],
      "Resource": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
      "Effect": "Allow"
    },
    {
      "Action": [
        "cloudwatch:PutMetricData"
      ],
      "Resource": "*",
      "Condition": {
        "StringEquals": {
          "cloudwatch:namespace": "AWS/Glue/ZeroETL"
        }
      },
      "Effect": "Allow"
    },
    {
      "Action": [
        "logs:CreateLogGroup",
        "logs:CreateLogStream",
        "logs:PutLogEvents"
      ],
      "Resource": "*",
      "Effect": "Allow"
    }
  ]
}

Fügen Sie die folgende Vertrauensrichtlinie in der IAM-Zielrolle hinzu, damit der Service AWS Glue die Rolle übernehmen kann:

JSON

{
  "Version":"2012-10-17",		 	 	 
  "Statement": [
    {
      "Effect": "Allow",
      "Principal": {
        "Service": "glue.amazonaws.com"
      },
      "Action": "sts:AssumeRole"
    }
  ]
}

Konfigurieren eines Amazon-SageMaker-Lakehouse-Katalogs mit verwaltetem Amazon Redshift-Speicher

In diesem Abschnitt werden die Voraussetzungen und Einrichtungsschritte für die Konfiguration eines Amazon-SageMaker-Lakehouse-Katalogs mit verwaltetem Amazon Redshift-Speicher (RMS) als Ziel für Ihre Null-ETL-Integration beschrieben.

Voraussetzungen für das Einrichten einer Integration

Bevor Sie eine Null-ETL-Integration mit einem Amazon-SageMaker-Lakehouse-Katalog unter Verwendung von verwaltetem Redshift-Speicher erstellen, müssen Sie die folgenden Einrichtungsschritte durchführen:

Einrichten von verwaltetem Amazon Redshift-Speicher

So richten Sie verwalteten Amazon Redshift-Speicher für Ihre Null-ETL-Integration ein:

Nachdem Sie den Amazon-SageMaker-Lakehouse-Katalog mit Amazon-Redshift-Speicher konfiguriert haben, können Sie zu Konfigurieren der Integration mit Ihrem Ziel übergehen und die Integrationseinrichtung abschließen.

Konfiguration eines Amazon Redshift-Data-Warehouse-Ziels

In diesem Abschnitt werden die Voraussetzungen und Einrichtungsschritte für die Konfiguration eines Amazon Redshift-Data-Warehouse als Ziel für Ihre Null-ETL-Integration beschrieben.

Voraussetzungen für das Einrichten einer Integration

Bevor Sie eine Null-ETL-Integration mit einem Amazon Redshift-Data-Warehouse-Ziel erstellen, müssen Sie die folgenden Einrichtungsschritte durchführen:

Richten Sie das Amazon Redshift-Data-Warehouse ein.

So richten Sie ein Amazon Redshift-Data-Warehouse für Ihre Null-ETL-Integration ein:

Nach der Konfiguration des Amazon Redshift-Data-Warehouse können Sie zu Konfigurieren der Integration mit Ihrem Ziel übergehen und die Integrationseinrichtung abschließen.

Konfigurieren der Integration mit Ihrem Ziel

Nachdem Sie Ihre Zielressourcen konfiguriert, Ihre Verbindung ausgewählt und eine Quell-IAM-Rolle angegeben haben, gehen Sie wie folgt vor, um die Einrichtung der Integration abzuschließen: