檢視 AWS Glue 任務的日誌 - AWS Glue

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

檢視 AWS Glue 任務的日誌

您可以使用 AWS Glue 主控台或 Amazon CloudWatch 主控台檢視即時日誌。

使用 AWS Glue 主控台儀表板檢視即時日誌
  1. 登入 AWS Management Console 並在 https://https://console.aws.amazon.com/glue/ 開啟 AWS Glue 主控台。

  2. 在導覽窗格中,選擇 Jobs (任務)

  3. 新增或開始現有的任務。選擇 Action (動作)Run job (執行任務)

    當您開始執行任務時,請導覽到頁面,其中包含有關執行中任務的資訊:

    • Logs (日誌) 標籤會顯示較舊的彙總應用程式日誌 。

    • 當任務在glueContext初始化的情況下執行時,日誌索引標籤會顯示即時進度列。

    • Logs 索引標籤也包含驅動程式日誌,可擷取即時 Apache Spark 驅動程式日誌,以及在任務執行時使用應用程式記錄器記錄的指令碼中的 AWS Glue 應用程式日誌。

  4. 對於較舊的任務,您也可以在 Job History (任務歷史記錄) 檢視中透過選擇 Logs (日誌) 來檢視即時日誌。此動作會移至 CloudWatch 主控台,並顯示所有 Spark 驅動程式、執行器,以及該任務執行的進度列日誌串流。

使用 CloudWatch 主控台儀表板檢視即時日誌
  1. 透過 https://console.aws.amazon.com/cloudwatch/ 開啟 CloudWatch 主控台。

  2. 在導覽窗格中,選擇 Log (日誌)

  3. 選擇 /aws-glue/jobs/error/ 日誌群組。

  4. Filter (篩選條件) 方塊中,貼上任務執行 ID。

    您可以檢視驅動程式日誌、執行器日誌,以及進度列 (如果使用 Standard filter (標準篩選條件))。