CloudWatch Agente da Amazon - Amazon EMR

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

CloudWatch Agente da Amazon

O CloudWatch agente da Amazon no Amazon EMR é uma ferramenta capaz de monitorar as EC2 instâncias da Amazon no cluster do EMR. É possível armazenar e visualizar as métricas que você coletar com o CloudWatch agente em CloudWatch. Para obter mais informações sobre o CloudWatch agente, consulte o Guia CloudWatch do usuário da Amazon.

nota

Você receberá cobranças adicionais se usar outros Serviços da AWS para publicar, consultar ou visualizar as métricas dos CloudWatch agentes da Amazon. Consulte as páginas a seguir para obter mais informações sobre preços.

Essas métricas são separadas das métricas gratuitas que o Amazon EMR fornece sob o AWS/ElasticMapReduce namespace em. CloudWatch Para obter mais informações sobre as métricas que não são publicadas pelo CloudWatch agente, consulte Monitoring Amazon EMR metrics with. CloudWatch

Com o Amazon EMR 7.0 e superior, você pode instalar uma versão personalizada do CloudWatch agente da Amazon EMR no cluster para coletar métricas do cluster do EMR. CloudWatchAgent é compatível com Runtime Role Clusters para EMR 7.6 e versões posteriores. O agente coleta as métricas de todos os nós do cluster, reúne-as no nó primário e publica as métricas desse nó na nuvem.

Você pode instalar o agente ao criar um cluster no console ou ao usar a API create-cluster. Para obter mais informações, consulte Criação de um cluster do EMR que use o agente da Amazon CloudWatch . Por padrão, um cluster do Amazon EMR que executa a série da versão 7.x publica 34 métricas CloudWatch em nível de sistema em intervalos de 60 segundos, mas você pode configurar o agente para publicar métricas diferentes. Outra opção é publicar métricas no Amazon Managed Service para Prometheus, e você também pode escolher quais métricas publicar. Em diferentes casos de uso e configurações, você pode configurar o agente para exibir e consultar as métricas no CloudWatch console, no Amazon Managed Grafana ou por meio do for CloudWatch ou APIs do Amazon Managed Service for Prometheus. Esses Serviços da AWS geram cobranças quando você os usa para armazenar e consultar métricas.

O CloudWatch agente no Amazon EMR pode publicar métricas do sistema, bem como métricas do JMX para os serviços a seguir no cluster do Amazon EMR.

  • Hadoop DataNode

  • Hadoop NameNode

  • Fio NodeManager

  • Fio ResourceManager

  • HBase Master: somente Amazon EMR 7.1+

  • HBase RegionServer : somente Amazon EMR 7.1+

  • HBase ThriftServer : somente Amazon EMR 7.1+

Para obter mais informações sobre métricas disponíveis e como configurar o CloudWatch agente no Amazon EMR, consulte Configuring agent agent CloudWatch for Amazon EMR.

A tabela a seguir lista a versão AmazonCloudWatchAgent incluída na versão mais recente da série 7.x do Amazon EMR, além dos componentes com os quais o Amazon EMR é instalado. AmazonCloudWatchAgent

Para obter a versão dos componentes instalados AmazonCloudWatchAgent nessa versão, consulte Release 7.9.0 Component Versions.

AmazonCloudWatchAgent informações da versão 7.9.0
Rótulo de versão do Amazon EMR AmazonCloudWatchAgent Versão Componentes instalados com o AmazonCloudWatchAgent

emzn-7.9.0

AmazonCloudWatchAgent 1.300032.2

adot-java-agent, emrfs, emr-amazon-cloudwatch-agent, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-mapred, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server