Usar um pipeline do OpenSearch Ingestion com o OpenTelemetry Collector

Esse exemplo de arquivo de configuração do OpenTelemetry exporta dados de rastreamento do OpenTelemetry Collector e os envia para um pipeline de Ingestão do OpenSearch. Para obter mais informações sobre a ingestão de dados de rastreamento, consulte Análise de rastreamento na documentação do Data Prepper.

Observe o seguinte:

extensions:
  sigv4auth:
    region: "region"
    service: "osis"
 
receivers:
  jaeger:
    protocols:
      grpc:
 
exporters:
  otlphttp:
    traces_endpoint: "https://pipeline-endpoint.us-east-1.osis.amazonaws.com/v1/traces"
    auth:
      authenticator: sigv4auth
    compression: none
 
service:
  extensions: [sigv4auth]
  pipelines:
    traces:
      receivers: [jaeger]
      exporters: [otlphttp]

Em seguida, você pode configurar um pipeline de Ingestão do OpenSearch como o seguinte, que especifica o plug-in de rastreamento OTel como fonte:

version: "2"
otel-trace-pipeline:
  source:
    otel_trace_source:
      path: "/v1/traces"
  processor:
    - trace_peer_forwarder:
  sink:
    - pipeline:
        name: "trace-pipeline"
    - pipeline:
        name: "service-map-pipeline"
trace-pipeline:
  source:
    pipeline:
      name: "otel-trace-pipeline"
  processor:
    - otel_traces:
  sink:
    - opensearch:
        hosts: ["https://search-domain-endpoint.us-east-1.es.amazonaws.com"]
        index_type: trace-analytics-raw
        aws:
          region: "region"      
service-map-pipeline:
  source:
    pipeline:
      name: "otel-trace-pipeline"
  processor:
    - service_map:
  sink:
    - opensearch:
        hosts: ["https://search-domain-endpoint.us-east-1.es.amazonaws.com"]
        index_type: trace-analytics-service-map
        aws:
          region: "region"

Para ver outro exemplo de pipeline, consulte o esquema de analytics de rastreamento pré-configurado. Para obter mais informações, consulte Trabalhar com esquemas.