采用 Amazon EMR 的 CloudWatch 代理的默认指标 - Amazon EMR

采用 Amazon EMR 的 CloudWatch 代理的默认指标

当您在 Amazon EMR 上安装 Amazon CloudWatch 代理时，除非您对代理进行不同的配置，否则默认配置会发布集群中所有实例的以下系统指标。有关每个指标的定义，请参阅《Amazon CloudWatch 用户指南》中的 CloudWatch 代理收集的指标。

CPU
CPU 指标

  • cpu_usage_active

  • cpu_usage_guest

  • cpu_usage_guest_nice

  • cpu_usage_idle

  • cpu_usage_iowait

  • cpu_usage_irq

  • cpu_usage_nice

  • cpu_usage_softirq

  • cpu_usage_steal

  • cpu_usage_system

  • cpu_usage_user

Disk
磁盘指标

  • disk_free

  • disk_total

  • disk_used

  • disk_used_percent

Memory
内存指标

  • mem_active

  • mem_available

  • mem_available_percent

  • mem_free

  • mem_inactive

  • mem_total

  • mem_used

  • mem_used_percent

  • mem_buffered

  • mem_cached

Network IO
网络 IO 指标

  • net_bytes_recv

  • net_bytes_sent

  • net_packets_recv

  • net_packets_sent

Process
进程指标

  • processes_running

  • processes_total

Swap
交换指标

  • swap_free

  • swap_used

  • swap_used_percent

默认情况下，代理会在自定义命名空间 CWAgent 和架构 cluster.id、instance.id、node.type、service.name 下将所有指标发布到 CloudWatch。按照以下步骤查看 CloudWatch 代理为 Amazon EMR 发布的这些默认指标：

  1. 导航到 Amazon CloudWatch 控制台。

  2. 选择指标选项卡，然后选择所有指标。

  3. 在自定义命名空间下，选择 CWAgent。然后选择架构：cluster.id、instance.id、node.type、service.name。

  4. 根据您的应用场景需要，继续从 CloudWatch 界面查询指标。

Amazon EMR 为每个指标附加以下标签：["cluster.id", "instance.id', "node.type", "service.name"]。关于这些标签，请考虑以下几点：

  • cluster.id 标签的值是生成该指标的 EMR 集群的 ID。cluster.id 标签的示例值为：j-123456789ABC。

  • instance.id 标签的值是生成该指标的 EMR 集群中的实例的 ID。instance.id 标签的示例值为 i-01bcf5f140f3355777。

  • node.type 标签的值表示生成指标的集群中实例的节点类型。该值可以是 master、core 或 task。

  • service.name 标签的值是生成该指标的服务的名称。默认系统指标的默认 service.name 值为 system。

注意

Amazon EMR 发行版 7.0.0 使用的指标标签架构略有不同。cluster.id 为 jobflow.id，node.type 不可用。instance.id 和 service.name 可用。