Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
CloudWatch canalisations
CloudWatch pipelines est un collecteur de données entièrement géré qui ingère, transforme et achemine les données de journal depuis des AWS services, des applications tierces et des sources personnalisées vers CloudWatch. Les processeurs intégrés vous permettent d'enrichir, de filtrer et de standardiser les journaux dans des formats tels que OCSF, sans gérer l'infrastructure ou les outils tiers.
CloudWatch pipelines est entièrement intégré à l'expérience de gestion des journaux, ce qui vous permet de traiter et d'enrichir de manière cohérente les données des journaux dans les groupes de journaux associés via la spécification de la source et du type de données. Cela permet de débloquer des cas d'utilisation tels que :
-
Catégorisation automatique des journaux : les journaux traités par le biais de pipelines sont automatiquement étiquetés avec des informations sur les sources de données, ce qui permet une découverte centrée sur les services et des requêtes dans l'ensemble de votre infrastructure
-
Élargir le support tiers : agréger et normaliser les journaux issus d'une bibliothèque croissante de sources tierces pour une analyse et une conformité unifiées
La sortie des pipelines est entièrement compatible avec les fonctionnalités de CloudWatch Logs, notamment les requêtes Logs Insights, la détection des anomalies des logs et Live Tail. CloudWatch pipelines fonctionne avec les classes de log Standard et Infrequent Access et est rétrocompatible avec les Log Transformers.
Pour commencer à utiliser les CloudWatch pipelines, consultez les pipelines sur la page CloudWatch d'ingestion
Note
Soyez conscient des limites suivantes qui s'appliquent aux CloudWatch pipelines
-
Nombre maximum de pipelines par compte : 330
-
Jusqu'à 300 pipelines pour collecter des données à partir de CloudWatch Logs
-
Jusqu'à 30 pipelines pour collecter des données provenant d'autres sources
-
Composants du pipeline
Chaque pipeline comprend les composants suivants :
-
Source : définit l'origine des données (compartiments Amazon S3, CloudWatch journaux, intégration tierce). Chaque pipeline doit avoir exactement une source.
-
Processeurs (facultatif) : transformez, analysez et enrichissez les données du journal au fur et à mesure qu'elles circulent dans le pipeline. Les processeurs sont appliqués séquentiellement dans l'ordre dans lequel ils sont définis.
-
Réservoir — Définit la destination à laquelle les données du journal traitées sont envoyées. Chaque pipeline doit avoir exactement un puits.
-
Extensions (facultatives) : fournissent des fonctionnalités supplémentaires telles que l'intégration de AWS Secrets Manager pour la gestion des informations d'identification.
Tout au long du pipeline, vos données restent protégées grâce au chiffrement de la couche de transport, garantissant ainsi le respect des exigences de sécurité et de conformité.
Note
Les définitions de pipeline ne sont pas cryptées et ne doivent jamais inclure de données sensibles, telles que les informations personnelles identifiables (PII).
Note
L'ajout de processeurs entraîne une mutation des événements du journal et les journaux originaux (bruts) ne sont pas conservés.
Tarification
CloudWatch les pipelines sont inclus dans CloudWatch Logs sans frais supplémentaires. Les taux d'ingestion de journaux standard basés sur la classe de journal (vendu ou personnalisé) et la classe de stockage (accès standard ou peu fréquent) s'appliquent toujours. Le dosage a lieu au moment de la première ingestion dans. CloudWatch CloudWatch Les sources de logs sont mesurées avant le traitement du pipeline. Les sources tierces et les sources de compartiments S3 sont classées dans la catégorie des journaux personnalisés et mesurées après le traitement. Pour plus d'informations sur la tarification, consultez la page CloudWatch Pricing
Disponibilité dans les Régions
CloudWatch les pipelines sont disponibles dans les AWS régions suivantes :
-
USA Est (Ohio)
-
USA Est (Virginie du Nord)
-
USA Ouest (Californie du Nord)
-
US West (Oregon)
-
Asie-Pacifique (Hong Kong)
-
Asie-Pacifique (Malaisie)
-
Asie-Pacifique (Mumbai)
-
Asie-Pacifique (Osaka)
-
Asia Pacific (Seoul)
-
Asie-Pacifique (Singapour)
-
Asie-Pacifique (Sydney)
-
Asie-Pacifique (Thaïlande)
-
Asie-Pacifique (Tokyo)
-
Canada (Centre)
-
Europe (Francfort)
-
Europe (Irlande)
-
Europe (Londres)
-
Europe (Paris)
-
Europe (Espagne)
-
Europe (Stockholm)
-
Amérique du Sud (São Paulo)
Note
La collecte de sources de données tierces est disponible dans les régions où OpenSearch Ingestion possède des points de terminaison d'API.
Pour plus de détails, consultez la section CloudWatch Points de terminaison et quotas Amazon dans le Références générales AWS.