CloudWatch 管道 - Amazon CloudWatch

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

CloudWatch 管道

遙測管道會收集、處理和路由資料,例如從各種來源到不同目的地的日誌、指標和追蹤。CloudWatch 管道提供從 AWS服務、第三方應用程式和自訂來源收集資料的集中方式。管道使用一組豐富的處理器處理和轉換資料、將資料轉換為標準格式,例如 Open Cybersecurity Schema Framework (OCSF),並將處理的資料路由到 CloudWatch Logs。

您可以從各種來源收集資料,包括 AWS服務、第三方應用程式和您自己的自訂來源。然後,使用處理器處理和轉換這些資料,而這些處理器可以標準化格式、篩選不需要的資訊,並使用其他背景資訊來豐富資料。這可讓您將各種資料格式轉換為標準化結構描述,例如 OCSF,以跨所有資料來源進行統一分析。

在整個管道中,您的資料會受到傳輸層加密的保護,確保符合安全與合規要求。

注意

設定管道時,請記住管道定義不會加密,且絕不應包含敏感資料,例如個人身分識別資訊 (PII)。

每個管道包含三個主要元件:

  1. 來源 – 定義資料的來源 (AWS服務、第三方應用程式或自訂來源)

  2. 處理器 – 選擇性地設定轉換、篩選或擴增資料的方式

    注意

    新增處理器會導致日誌事件的變動,並且不會保留原始 (原始) 日誌。

  3. 接收器 – 指定應交付處理資料的位置

若要開始使用 CloudWatch 管道:

  1. 登入 AWS管理主控台

  2. 導覽至 CloudWatch。

  3. 從導覽面板選擇擷取,然後選取管道索引標籤。

  4. 選擇 Create pipeline (建立管道)

注意

請注意適用於 CloudWatch 管道的下列限制

  • 每個帳戶的管道數量上限:330

    • 最多 300 個管道,用於從 CloudWatch Logs 收集資料

    • 最多 30 個管道,用於從其他來源收集資料

CloudWatch 管道功能是作為現有 CloudWatch Logs 資料擷取定價的一部分提供,無需額外成本,並在擷取時進行計量。

現有的日誌類別擷取定價適用於已終止和自訂日誌。例如,如果您擷取 30GB 的自訂標準類別日誌,並透過管道處理它們,則每月 15 美元的日誌擷取成本。如果您不常擷取和處理存取自訂日誌,則需要支付每月 7.50 USD。如需日誌資料擷取定價的詳細資訊,請參閱 CloudWatch 定價。

從 3P 連接器來源或透過 S3 儲存貯體連接器擷取資料歸類為自訂日誌擷取,並遵循自訂日誌資料擷取定價。計量會在資料擷取至 CloudWatch 時進行。3P 連接器來源或透過 S3 儲存貯體連接器,會在處理後計量。CloudWatch 管道來源計量,包括 Vended 和自訂 CloudWatch 日誌來源,會在第一次透過管道處理之前收到日誌時進行。

CloudWatch 管道可在下列AWS區域使用。

注意

OpenSearch Ingestion 具有 API 端點的區域中,可使用第三方資料來源集合。

  • 美國東部 (俄亥俄)

  • 美國東部 (維吉尼亞北部)

  • 美國西部 (加利佛尼亞北部)

  • 美國西部 (奧勒岡)

  • 亞太地區 (香港)

  • 亞太區域 (馬來西亞)

  • 亞太地區 (孟買)

  • 亞太區域 (大阪)

  • 亞太區域 (首爾)

  • 亞太區域 (新加坡)

  • 亞太地區 (雪梨)

  • 亞太區域 (泰國)

  • 亞太地區 (東京)

  • 加拿大 (中部)

  • 歐洲 (法蘭克福)

  • 歐洲 (愛爾蘭)

  • 歐洲 (倫敦)

  • Europe (Paris)

  • 歐洲 (西班牙)

  • 歐洲 (斯德哥爾摩)

  • 南美洲 (聖保羅)

如需詳細資訊,請參閱《》中的 Amazon CloudWatch 端點和配額AWS 一般參考