Pipelines do CloudWatch

Um pipeline de telemetria coleta, processa e roteia dados, como logs, métricas e rastros de várias fontes para diferentes destinos. Os pipelines do CloudWatch oferecem uma maneira centralizada de coletar dados de serviços da AWS, aplicações de terceiros e fontes personalizadas. O pipeline processa e transforma dados usando um rico conjunto de processadores, converte dados em formatos padrão, como OCSF (Open Cybersecurity Schema Framework), e roteia os dados processados para o CloudWatch Logs.

Você pode coletar dados de uma ampla variedade de fontes, inclusive de serviços da AWS, aplicações de terceiros e de suas próprias fontes personalizadas. Esses dados são então processados e transformados usando processadores que podem padronizar formatos, filtrar informações desnecessárias e enriquecer os dados com contexto adicional. Isso permite converter formatos de dados variados em esquemas padronizados, como OCSF, possibilitando a análise unificada de todas as fontes de dados.

Em todo o pipeline, seus dados permanecem protegidos com a criptografia de camada de transporte, garantindo que os requisitos de segurança e conformidade sejam atendidos.

Há três componentes principais:

Para começar a usar os pipelines do CloudWatch:

Os recursos dos pipelines do CloudWatch são incluídos nos preços existentes de ingestão de dados do CloudWatch Logs, sem custo adicional, com a medição ocorrendo no momento da ingestão.

Os preços de ingestão das classes de logs existentes para logs fornecidos e personalizados se aplicam. Por exemplo, a ingestão de 30 GB de logs personalizados da classe padrão e seu processamento por um pipeline custaria 15 USD por mês na ingestão de logs. A ingestão e o processamento de logs personalizados pouco acessados custaria 7,50 USD/mês. Consulte Preços do CloudWatch para obter mais detalhes sobre os preços de ingestão de dados de log.

A ingestão de dados de fontes de conectores 3P ou por um conector de bucket do S3 é classificada como ingestão de logs personalizados e segue os preços de ingestão de dados de log personalizados. A medição ocorre no momento da ingestão dos dados no CloudWatch. As fontes de conectores 3P ou por um conector de bucket do S3 são medidas após o processamento. A medição das fontes do pipeline do CloudWatch, incluindo fontes de logs fornecidos e personalizados do CloudWatch Logs, ocorre no momento em que os registros são recebidos, ou seja, antes do processamento por um pipeline.

Os pipelines do CloudWatch estão disponíveis nas regiões da AWS a seguir.

Para obter mais detalhes, consulte Endpoints e cotas do Amazon CloudWatch na Referência geral da AWS.