Amazon Redshift와 Oracle Database@AWS 통합 설정

Oracle 데이터베이스와 Amazon Redshift 간에 제로 ETL 통합을 설정하려면 다음 단계를 완료하세요.

1단계: ODB 네트워크에 대한 제로 ETL 활성화

소스 VM 클러스터와 연결된 ODB 네트워크에 대해 제로 ETL 통합을 활성화할 수 있습니다. 기본적으로는 이 통합이 비활성화되어 있습니다.

aws odb update-odb-network \
  --odb-network-id odb-network-id \
  --zero-etl-access ENABLED

소스 VM 클러스터와 연결된 ODB 네트워크에 대해 제로 ETL 통합을 활성화하려면 update-odb-network 명령을 사용합니다. 이 명령은 제로 ETL 통합에 필요한 네트워크 인프라를 구성합니다.

aws odb update-odb-network \
  --odb-network-id your-odb-network-id \
  --zero-etl-access ENABLED

2단계: Oracle 데이터베이스 구성

사전 조건에 설명된 대로 Oracle 데이터베이스 구성을 완료합니다.

3단계: AWS Secrets Manager 및 AWS Key Management Service 설정

고객 관리형 키(CMK)를 생성하고 데이터베이스 자격 증명을 저장합니다.

4단계: IAM 권한 구성

제로 ETL 통합 작업을 허용하는 IAM 정책을 생성하고 연결합니다.

aws iam create-policy \
  --policy-name "ODBZeroETLIntegrationPolicy" \
  --policy-document file://odb-zetl-iam-policy.json

aws iam attach-user-policy \
  --user-name your-iam-username \
  --policy-arn policy-arn    

다음 정책은 필요한 권한을 부여합니다.

5단계: Amazon Redshift 리소스 정책 구성

Amazon Redshift 클러스터에 리소스 정책을 설정하여 인바운드 통합을 승인합니다.

aws redshift put-resource-policy \
  --no-verify-ssl \
  --resource-arn "your-redshift-cluster-arn" \
  --policy '{
    "Version": "2012-10-17",		 	 	 
    "Statement": [
      {
        "Effect": "Allow",
        "Principal": {
          "Service": "redshift.amazonaws.com"
        },
        "Action": [
          "redshift:AuthorizeInboundIntegration"
        ],
        "Condition": {
          "StringEquals": {
            "aws:SourceArn": "your-vm-cluster-arn"
          }
        }
      },
      {
        "Effect": "Allow",
        "Principal": {
          "AWS": "your-account-id"
        },
        "Action": [
          "redshift:CreateInboundIntegration"
        ]
      }
    ]
  }' \
  --region us-west-2

6단계: AWS Glue를 사용하여 제로 ETL 통합 생성

AWS Glue create-integration 명령을 사용하여 제로 ETL 통합을 생성합니다. 이 명령에서는 소스 VM 클러스터와 대상 Amazon Redshift 네임스페이스를 지정합니다.

다음 예제에서는 Exadata VM 클러스터에서 실행되고 있는 pdb1이라는 PDB와의 통합을 생성합니다. 소스 ARN에서 cloud-vm-cluster를 cloud-autonomous-vm-cluster로 대체하여 Autonomous VM 클러스터를 생성할 수도 있습니다. KMS 키 지정은 선택 사항입니다. 키를 지정하면 3단계: AWS Secrets Manager 및 AWS Key Management Service 설정에서 생성한 키와 다를 수 있습니다.

aws glue create-integration \
  --integration-name "MyODBZeroETLIntegration" \
  --source-arn "arn:aws:odb:region:account:cloud-vm-cluster/cluster-id" \
  --target-arn "arn:aws:redshift:region:account:namespace/namespace-id" \
  --data-filter "include: pdb1.*.*" \
  --integration-config '{
      "RefreshInterval": "10",
      "IntegrationMode": "DEFAULT",
      "SourcePropertiesMap": {
        "secret-arn": "arn:aws:secretsmanager:region:account:secret:secret-name"
      }
    }' \
  --description "Zero-ETL integration for Oracle to Amazon Redshift" \
  --kms-key-id "arn:aws:kms:region:account:key/key-id"  

명령은 통합 ARN을 반환하고 상태를 creating으로 설정합니다. describe-integrations 명령을 사용하여 통합 상태를 모니터링할 수 있습니다.

aws glue describe-integrations \
  --integration-identifier integration-id

7단계: Amazon Redshift에서 대상 데이터베이스 생성

통합이 활성화되면 Amazon Redshift 클러스터에 대상 데이터베이스를 생성합니다.

-- Connect to your Amazon Redshift cluster
psql -h your-redshift-endpoint -U username -d database

-- Create database from integration
CREATE DATABASE target_database_name 
FROM INTEGRATION 'integration-id' 
DATABASE "source_pdb_name";

대상 데이터베이스를 생성한 후 복제된 데이터를 쿼리할 수 있습니다.

-- List databases to verify creation
\l

-- Connect to the new database
\c target_database_name

-- List tables to see replicated data
\dt    

제로 ETL 통합 확인

AWS Glue에서 통합 상태를 쿼리하고 Oracle 변경 사항이 Amazon Redshift에 복제되고 있는지 확인하여 통합이 작동하는지 확인합니다.