CloudWatch Agent Amazon - Amazon EMR

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

CloudWatch Agent Amazon

L' CloudWatch agent Amazon sur Amazon EMR est un outil qui permet de surveiller les EC2 instances Amazon de votre cluster EMR. Vous pouvez stocker et consulter les métriques que vous collectez avec l' CloudWatch agent CloudWatch. Pour plus d'informations sur l' CloudWatch agent, consultez le guide de CloudWatch l'utilisateur Amazon.

Note

Des frais supplémentaires vous seront facturés si vous en utilisez un autre Services AWS pour publier, consulter ou consulter les statistiques des CloudWatch agents Amazon. Consultez les pages suivantes pour plus d'informations sur les tarifs.

Ces métriques sont distinctes des métriques gratuites qu'Amazon EMR fournit sous l'espace de AWS/ElasticMapReduce noms dans. CloudWatch Pour plus d'informations sur les métriques que l' CloudWatch agent ne publie pas, consultez la section Surveillance des métriques Amazon EMR avec. CloudWatch

Avec Amazon EMR 7.0 et versions ultérieures, vous pouvez installer une version personnalisée de l' CloudWatch agent Amazon sur votre cluster pour collecter des métriques à partir de votre cluster EMR. CloudWatchAgent est pris en charge sur les clusters de rôles d'exécution pour EMR 7.6 et versions ultérieures. L'agent collecte les métriques de tous les nœuds du cluster, les rassemble sur le nœud primaire et publie les métriques de ce nœud dans le cloud.

Vous pouvez installer l’agent lorsque vous créez un cluster dans la console ou lorsque vous utilisez l’API create-cluster. Pour de plus amples informations, veuillez consulter Créez un cluster EMR qui utilise l'agent Amazon Amazon Amazon CloudWatch . Par défaut, un cluster Amazon EMR qui exécute la série 7.x publie 34 métriques CloudWatch au niveau du système toutes les 60 secondes, mais vous pouvez configurer l'agent pour qu'il publie différentes métriques. Une autre option consiste à publier des métriques sur Amazon Managed Service for Prometheus, et vous pouvez également choisir les métriques à publier. Selon les cas d'utilisation et les configurations, vous pouvez configurer l'agent pour consulter et les interroger dans la CloudWatch console, Amazon Managed Grafana, ou via APIs la for CloudWatch ou Amazon Managed Service for Prometheus. Ils Services AWS entraînent des frais lorsque vous les utilisez pour stocker et interroger des métriques.

L' CloudWatch agent sur Amazon EMR peut publier des métriques système ainsi que des métriques JMX pour les services suivants sur votre cluster Amazon EMR.

  • Hadoop DataNode

  • Hadoop NameNode

  • Laine NodeManager

  • Laine ResourceManager

  • HBase Master — Amazon EMR 7.1 ou version ultérieure uniquement

  • HBase RegionServer — Amazon EMR 7.1 et versions ultérieures uniquement

  • HBase ThriftServer — Amazon EMR 7.1 et versions ultérieures uniquement

Pour plus d'informations sur les métriques disponibles et sur la façon de configurer l' CloudWatch agent sur Amazon EMR, consultez Configuration de l' CloudWatch agent pour Amazon EMR.

Le tableau suivant répertorie la version AmazonCloudWatchAgent incluse dans la dernière version d'Amazon EMR série 7.x, ainsi que les composants avec lesquels Amazon EMR installe. AmazonCloudWatchAgent

Pour connaître la version des composants installés avec AmazonCloudWatchAgent cette version, consultez les versions des composants de la version 7.9.0.

AmazonCloudWatchAgent informations de version pour emr-7.9.0
Étiquette de version Amazon EMR AmazonCloudWatchAgent Version Composants installés avec AmazonCloudWatchAgent

emr-7.9.0

AmazonCloudWatchAgent 1.300032.2

adot-java-agent, emrfs, emr-amazon-cloudwatch-agent, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-mapred, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server