本文為英文版的機器翻譯版本，如內容有任何歧義或不一致之處，概以英文版為準。

監控整合

整合狀態

下列整合狀態可說明整合：

檢視整合的 Amazon CloudWatch 日誌

AWS Glue 零 ETL 整合會產生 Amazon CloudWatch logs，讓您清楚了解資料移動。與每個成功擷取相關的日誌事件，或由於來源資料記錄有問題而遇到的任何失敗，或由於結構描述變更或許可不足而導致的資料寫入錯誤，都會傳送到客戶帳戶中建立的預設日誌群組。

對於建立的每個整合，將在 Amazon Cloudwatch 中的 /aws-glue/zeroETL-integrations/logs/ 下收集該整合的日誌事件。在日誌群組中，日誌訊息會分區為日誌串流。建立的每個整合都有一個專用日誌串流，用於寫入該整合的所有日誌。例如，可在 /aws-glue/zeroETL-integrations/logs/03cabe77-79e7-4b7a-b3da-8c160bea6bbf 中找到與 IntegrationArn arn:aws:glue:us-east-1:123456789012:integration:03cabe77-79e7-4b7a-b3da-8c160bea6bbf 整合的日誌。可以從建立整合時產生的 {integrationArn} 中參考 {IntegrationId}。

啟用 ABAC 所需的 IAM 許可

建立整合時，來源和目標角色需要下列 IAM 許可，才能為整合啟用 CloudWatch 記錄。 AWS Glue 零 ETL 整合會使用來源和目標角色中提供的這些許可，將 CloudWatch 日誌傳送至客戶帳戶。

JSON

{
  "Version":"2012-10-17",		 	 	 
  "Statement": [
    {
      "Effect": "Allow",
      "Action": [
        "logs:CreateLogGroup",
        "logs:CreateLogStream",
        "logs:PutLogEvents"
      ],
      "Resource": [
        "*"
      ]
    }
  ]
}

日誌訊息

日誌格式：零 ETL 整合會發出四種類型的日誌訊息：

// Ingestion started
{
"integrationArn": "arn:aws:glue:us-east-2:123456789012:integration/1a012bba-123a-1bba-ab1c-173de3b12345",
...
    "messageType": "IngestionStarted",
    "details": {
        "tableName": "testDDBTable",
        "message": "Ingestion Job started"
    }
}
// Data processing stats on successful table ingestion
{
...
    "messageType": "IngestionProcessingStats",
    "details": {
        "tableName": "testDDBTable",
        "insert_count": 100,
        "update_count": 10,
        "delete_count": 10   
    }
}
// Ingestion failure logs for failed table-processing
{
...
    "messageType": "IngestionFailed",
    "details": {
        "tableName": "testDDBTable",
        "errorMessage": "Failed to ingest data with error: Target Glue database not found.",
        "error_code" : "client_error"
    }
}
// Ingestion completed notification with lastSyncedTimestamp
{
...
    "messageType": "IngestionCompleted",
    "details": {
        "tableName": "testDDBTable",
        "message": "Ingestion Job completed"
        "lastSyncedTimestamp": "1132344255745"
    }
}

檢視整合的 Amazon CloudWatch 指標

整合完成後，您可以看到每個 AWS Glue 任務執行在帳戶中產生的這些 Amazon Cloudwatch 指標：

CloudWatch 指標命名空間："AWS/Glue/ZeroETL"

指標維度：

指標名稱：

使用 Amazon EventBridge 來管理事件通知

零 ETL 整合使用 Amazon EventBridge 來管理事件通知，讓您隨時掌握整合變更的最新資訊。Amazon EventBridge 是無伺服器事件匯流排服務，可讓您用於將應用程式與來自各種來源的資料互相連線。在此情況下，事件來源為 AWS Glue。在 環境中受監控變更的事件會自動從 傳送至 EventBridge AWS Glue 。系統會以接近即時的速度傳送事件。

EventBridge 會提供環境讓您編寫事件規則，它可以指定要針對特定事件採取的動作。您也可以設定目標，這些目標是 EventBridge 可以向其傳送事件的資源。目標可以包含 API 目的地、Amazon CloudWatch 日誌群組和其他項目。如需規則的相關資訊，請參閱 Amazon EventBridge 規則。如需目標的相關資訊，請參閱 Amazon EventBridge 目標。

若要擷取所有零 ETL 通知，請建立符合下列要求的 Eventbridge 規則：

{
  "source": [{
    "prefix": "aws.glue-zero-etl“
  }],
  "detail-type": [{
    "prefix": "Glue Zero ETL“
  }]
}

下表包含零 ETL 整合事件，以及其他中繼資料：