View a markdown version of this page

CloudWatch pipa - Amazon CloudWatch
Komponen pipaHargaKetersediaan wilayah

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

CloudWatch pipa

CloudWatch pipeline adalah pengumpul data yang dikelola sepenuhnya yang menyerap, mengubah, dan merutekan data telemetri—termasuk log dan metrik—dari AWS layanan, aplikasi pihak ketiga, dan sumber khusus ke. CloudWatch Built-in prosesor memungkinkan Anda memperkaya, memfilter, dan menstandarkan log ke dalam format seperti OCSF—tanpa mengelola infrastruktur atau alat pihak ketiga. Untuk metrik, CloudWatch pipeline memproses dan memperkaya OpenTelemetry (oTel) metrik sebaris selama penyerapan ke CloudWatch.

CloudWatch pipeline sepenuhnya terintegrasi dengan pengalaman manajemen log, memungkinkan Anda untuk secara konsisten memproses dan memperkaya data log di seluruh grup log terkait melalui spesifikasi sumber data dan tipe data. Ini membuka kasus penggunaan seperti:

  • Kategorisasi log otomatis — Log yang diproses melalui pipeline secara otomatis ditandai dengan informasi sumber data, memungkinkan penemuan dan kueri yang berpusat pada layanan di seluruh infrastruktur Anda

  • Memperluas dukungan pihak ketiga — Menggabungkan dan menormalkan log dari pustaka sumber pihak ketiga yang berkembang untuk analisis dan kepatuhan terpadu

Untuk metrik, CloudWatch pipeline mengaktifkan kasus penggunaan berikut:

  • Pengayaan — Tambahkan konteks bisnis seperti tim, pusat biaya, atau lingkungan ke metrik dari sumber yang tidak dapat Anda modifikasi

  • Optimalisasi biaya — Hilangkan atribut kardinalitas tinggi untuk mengurangi biaya penyimpanan

  • Standardisasi — Ganti nama metrik dan atribut untuk menegakkan konvensi penamaan

Output dari pipeline sepenuhnya kompatibel dengan fitur CloudWatch Log termasuk kueri Logs Insights, Deteksi Anomali Logs, dan Live Tail. CloudWatch pipeline bekerja dengan kelas log Akses Standar dan Akses Terjarang dan kompatibel mundur dengan Log Transformers.

Untuk pipeline metrik, metrik yang diproses sepenuhnya dapat dikueri melalui PromQL di Query Studio dan kompatibel dengan CloudWatch Alarm dan Deteksi Anomali.

Untuk memulai dengan CloudWatch pipeline, kunjungi pipeline dalam halaman CloudWatch penyer apan di CloudWatch konsol.

catatan

Waspadai batasan berikut yang berlaku untuk CloudWatch pipeline

  • Saluran pipa log per akun: 330

    • Hingga 300 pipeline untuk mengumpulkan data dari CloudWatch Log

    • Hingga 30 pipeline untuk mengumpulkan data dari sumber lain

  • Pipeline metrik per akun: hingga 300

  • Hingga 20 prosesor per pipeline (log dan metrik)

  • Pipeline metrik yang didukung jalur penyerapan: hanya OTLP

Komponen pipa

Setiap pipa terdiri dari komponen-komponen berikut:

  • Sumber — Mendefinisikan dari mana data berasal (bucket Amazon S3, CloudWatch Log, CloudWatch Metrik (oTel), integrasi pihak ketiga). Setiap pipa harus memiliki tepat satu sumber. Pipeline metrik memproses metrik oTEL pada jalur penyerapan OTLP.

  • Pro sesor (opsional) — Mengubah, mengurai, dan memperkaya data telemetri saat mengalir melalui pipa. Prosesor diterapkan secara berurutan dalam urutan yang didefinisikan. Pipeline metrik mendukung serangkaian prosesor berbeda yang dioptimalkan untuk atribut metrik oTel.

  • Sink — Mendefinisikan tujuan tempat data yang diproses dikirim. Jenis wastafel yang didukung termasuk cloudwatch_logs dancloudwatch_metrics. Setiap pipa harus memiliki tepat satu wastafel.

  • Ekstensi (opsional) — Menyediakan fungsionalitas tambahan seperti integrasi AWS Secrets Manager untuk manajemen kredensia.

Di seluruh pipeline, data Anda tetap terlindungi dengan enkripsi lapisan transportasi sehingga data Anda memenuhi persyaratan keamanan dan kepatuhan.

catatan

Definisi pipeline tidak dienkripsi dengan kunci yang disediakan pelanggan dan tidak boleh menyertakan data sensitif, seperti kata sandi, kunci API, atau informasi identitas pribadi (PII).

catatan

Menambahkan prosesor menyebabkan mutasi peristiwa log dan log asli (mentah) tidak dipertahankan.

Harga

CloudWatch pipa disertakan dengan CloudWatch Log tanpa biaya tambahan. Tingkat penyerapan log standar berdasarkan kelas log (dijual atau kustom) dan kelas penyimpanan (Akses Standar atau Akses Jarang) masih berlaku. Pengukuran terjadi pada saat pertama kali tertelan. CloudWatch CloudWatch Sumber log diukur sebelum pemrosesan pipa. Third-party dan sumber bucket S3 diklasifikasikan sebagai log Kustom dan diukur setelah diproses. Untuk detail harga, lihat CloudWatch Harga.

Untuk pipeline metrik, biaya konsumsi dan penyimpanan metrik OTel standar CloudWatch berlaku. Tidak ada biaya tambahan untuk pemrosesan pipa.

Ketersediaan wilayah

CloudWatch pipeline tersedia di Wil AWS ayah berikut:

  • Timur AS (N. Virginia)

  • AS Timur (Ohio)

  • AS Barat (California Utara)

  • AS Barat (Oregon)

  • Afrika (Cape Town)

  • Asia Pasifik (Hong Kong)

  • Asia Pasifik (Hyderabad)

  • Asia Pasifik (Jakarta)

  • Asia Pasifik (Malaysia)

  • Asia Pacific (Melbourne)

  • Asia Pasifik (Mumbai)

  • Asia Pasifik (Selandia Baru)

  • Asia Pasifik (Osaka)

  • Asia Pasifik (Seoul)

  • Asia Pasifik (Singapura)

  • Asia Pasifik (Sydney)

  • Asia Pasifik (Taipei)

  • Asia Pasifik (Thailand)

  • Asia Pasifik (Tokyo)

  • (Canada (Central)

  • Kanada Barat (Calgary)

  • Eropa (Frankfurt)

  • Eropa (Irlandia)

  • Eropa (London)

  • Eropa (Milan)

  • Eropa (Paris)

  • Eropa (Spanyol)

  • Eropa (Stockholm)

  • Eropa (Zürich)

  • Israel (Tel Aviv)

  • Meksiko (Tengah)

  • Amerika Selatan (Sao Paulo)

catatan

Third-party pengumpulan sumber data tersedia di wilayah di mana Inges OpenSearch tion memiliki titik akhir API.

Untuk detail selengkapnya, lihat CloudWatch titik akhir dan kuota Amazon di Referensi Umum AWS.