View a markdown version of this page

CloudWatch Rohrleitungen - Amazon CloudWatch
Komponenten der PipelinePreisgestaltungVerfügbarkeit in Regionen

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

CloudWatch Rohrleitungen

CloudWatch Pipelines ist ein vollständig verwalteter Datensammler, der Telemetriedaten — einschließlich Logs und Metriken — von Diensten, Drittanbieteranwendungen und benutzerdefinierten Quellen aufnimmt, transformiert und AWS weiterleitet. CloudWatch Built-in Prozessoren ermöglichen es Ihnen, Protokolle in Formaten wie OCSF anzureichern, zu filtern und zu standardisieren — ohne die Infrastruktur oder Tools von Drittanbietern verwalten zu müssen. Für Metriken, CloudWatch Pipelines, Prozesse und Anreicherungen OpenTelemetry (OTel) -Metriken, die während der Aufnahme in das System integriert werden. CloudWatch

CloudWatch Pipelines ist vollständig in das Log-Management-Erlebnis integriert, sodass Sie Logdaten über verwandte Loggruppen hinweg mithilfe von Datenquellen- und Datentypspezifikationen konsistent verarbeiten und anreichern können. Dadurch werden Anwendungsfälle wie die folgenden freigeschaltet:

  • Automatische Log-Kategorisierung — Logs, die über Pipelines verarbeitet werden, werden automatisch mit Datenquelleninformationen versehen, was eine serviceorientierte Erkennung und Abfrage in Ihrer gesamten Infrastruktur ermöglicht

  • Erweiterter Drittanbieter-Support — Aggregieren und normalisieren Sie Protokolle aus einer wachsenden Bibliothek von Drittanbieterquellen, um einheitliche Analysen und Compliance-Anforderungen zu gewährleisten

Für Metriken ermöglichen CloudWatch Pipelines die folgenden Anwendungsfälle:

  • Erweiterung — Fügen Sie Kennzahlen aus Quellen, die Sie nicht ändern können, Geschäftskontext wie Team, Kostenstelle oder Umgebung hinzu

  • Kostenoptimierung — Entfernen Sie Attribute mit hoher Kardinalität, um die Speicherkosten zu senken

  • Standardisierung — Benennen Sie Metriken und Attribute um, um Benennungskonventionen durchzusetzen

Die Ausgabe von Pipelines ist vollständig kompatibel mit den CloudWatch Logs-Funktionen wie Logs Insights-Abfragen, Logs Anomaly Detection und Live Tail. CloudWatch Pipelines funktioniert sowohl mit den Protokollklassen Standard als auch mit Infrequent Access und ist abwärtskompatibel mit Log Transformers.

Bei Metrik-Pipelines sind verarbeitete Metriken vollständig über PromQL in Query Studio abfragbar und mit Alarmen und Anomalieerkennung kompatibel. CloudWatch

Um mit CloudWatch Pipelines zu beginnen, besuchen Sie Pipelines auf der Erfassungsseite in der Konsole. CloudWatch CloudWatch

Anmerkung

Beachten Sie die folgenden Beschränkungen, die für Pipelines gelten CloudWatch

  • Protokolliert Pipelines pro Konto: 330

    • Bis zu 300 Pipelines zum Sammeln von Daten aus Logs CloudWatch

    • Bis zu 30 Pipelines zum Sammeln von Daten aus anderen Quellen

  • Metrik-Pipelines pro Konto: bis zu 300

  • Bis zu 20 Prozessoren pro Pipeline (Protokolle und Metriken)

  • Von den Metrik-Pipelines unterstützter Aufnahmepfad: nur OTLP

Komponenten der Pipeline

Jede Pipeline besteht aus den folgenden Komponenten:

  • Quelle — Definiert, woher die Daten stammen (Amazon S3-Buckets, CloudWatch Logs, CloudWatch Metrics (OTel), Drittanbieter-Integration). Jede Pipeline muss genau eine Quelle haben. Metrik-Pipelines verarbeiten OTel-Metriken auf dem OTLP-Aufnahmepfad.

  • Prozessoren (optional) — Transformieren, analysieren und erweitern Telemetriedaten, während sie durch die Pipeline fließen. Prozessoren werden sequentiell in der Reihenfolge angewendet, in der sie definiert sind. Metrik-Pipelines unterstützen eine bestimmte Gruppe von Prozessoren, die für OTel-Metrikattribute optimiert sind.

  • Senke — Definiert das Ziel, an das die verarbeiteten Daten gesendet werden. Zu den unterstützten Senktypen gehören cloudwatch_logs undcloudwatch_metrics. Jede Pipeline muss genau eine Senke haben.

  • Erweiterungen (optional) — Bieten zusätzliche Funktionen wie die AWS Secrets Manager-Integration für die Verwaltung von Anmeldeinformationen.

Während der gesamten Pipeline bleiben Ihre Daten durch Verschlüsselung auf Transportebene geschützt, sodass Ihre Daten die Sicherheits- und Compliance-Anforderungen erfüllen.

Anmerkung

Pipeline-Definitionen werden nicht mit vom Kunden bereitgestellten Schlüsseln verschlüsselt und dürfen niemals vertrauliche Daten wie Passwörter, API-Schlüssel oder persönlich identifizierbare Informationen (PII) enthalten.

Anmerkung

Das Hinzufügen von Prozessoren führt zu einer Veränderung der Protokollereignisse und die ursprünglichen (rohen) Protokolle werden nicht beibehalten.

Preisgestaltung

CloudWatch Pipelines sind in CloudWatch Logs ohne zusätzliche Kosten enthalten. Die Standardraten für die Aufnahme von Protokollen, die auf der Protokollklasse (verkauft oder benutzerdefiniert) und der Speicherklasse (Standard oder Infrequent Access) basieren, gelten weiterhin. Die Messung erfolgt zum Zeitpunkt der ersten Aufnahme in. CloudWatch CloudWatch Die Quellen der Protokolle werden vor der Pipeline-Verarbeitung gemessen. Third-party und S3-Bucket-Quellen werden als benutzerdefinierte Protokolle klassifiziert und nach der Verarbeitung gemessen. Details zu den Preisen finden Sie unter CloudWatch -Preise.

Für Metrik-Pipelines fallen die standardmäßigen Erfassung- CloudWatch und Speichergebühren für OTel-Metriken an. Für die Pipeline-Verarbeitung fallen keine zusätzlichen Gebühren an.

Verfügbarkeit in Regionen

CloudWatch Pipelines ist in den folgenden AWS Regionen verfügbar:

  • USA Ost (Nord-Virginia)

  • USA Ost (Ohio)

  • USA West (Nordkalifornien)

  • USA West (Oregon)

  • Africa (Cape Town)

  • Asien-Pazifik (Hongkong)

  • Asien-Pazifik (Hyderabad)

  • Asien-Pazifik (Jakarta)

  • Asien-Pazifik (Malaysia)

  • Asien-Pazifik (Melbourne)

  • Asien-Pazifik (Mumbai)

  • Asien-Pazifik (Neuseeland)

  • Asien-Pazifik (Osaka)

  • Asien-Pazifik (Seoul)

  • Asien-Pazifik (Singapur)

  • Asien-Pazifik (Sydney)

  • Asien-Pazifik (Taipeh)

  • Asien-Pazifik (Thailand)

  • Asien-Pazifik (Tokio)

  • Canada (Central)

  • Kanada West (Calgary)

  • Europe (Frankfurt)

  • Europa (Irland)

  • Europa (London)

  • Europa (Milan)

  • Europa (Paris)

  • Europa (Spain)

  • Europa (Stockholm)

  • Europa (Zürich)

  • Israel (Tel Aviv)

  • Mexiko (Zentral)

  • Südamerika (São Paulo)

Anmerkung

Third-party Die Datenquellenerfassung ist in Regionen verfügbar, in denen OpenSearch Ingestion über API-Endpunkte verfügt.

Weitere Informationen finden Sie unter CloudWatch Amazon-Endpunkte und Kontingente im. Allgemeine AWS-Referenz