在 Amazon CloudWatch 中监控 Data Catalog 使用情况指标 - AWS Glue

在 Amazon CloudWatch 中监控 Data Catalog 使用情况指标

现在可以通过 Amazon CloudWatch 查看 AWS Glue Data Catalog 使用情况指标,从而简化对 Data Catalog 中资源利用率的监控和理解。您现在可以立即查看 Glue Catalog API 对目录、数据库、表、分区和连接的使用情况,从而可以更轻松保持对数据目录的监督。

Data Catalog 指标概述

AWS Glue Data Catalog 会自动将使用情况指标发布到 Amazon CloudWatch。借助 CloudWatch 指标集成,您可以跟踪每分钟的关键性能指标,包括:

  • 表请求数

  • 已创建的分区索引

  • 更新的连接数

  • 更新的统计数据

这些指标有助您识别瓶颈、检测异常并做出有数据依据的决策,从而提高数据目录的整体可靠性。您还可以设置 CloudWatch 警报,以便在指标超出指定阈值时收到通知,从而积极管理部署。

将指标添加到 CloudWatch 控制面板

您可以创建自定义控制面板来监控您的 AWS Glue Data Catalog 资源,并设置警报以在出现任何异常活动时收到通知。

您可以按照以下步骤将 Data Catalog 指标添加到 CloudWatch 控制面板:

  1. 通过 https://console.aws.amazon.com/cloudwatch/ 打开 CloudWatch 控制台。

  2. 在导航窗格中,选择指标

  3. 选择所有指标

  4. 选择使用情况 > 按 AWS 资源

  5. Glue 筛选以查看可用指标。

  6. 选择需要添加到控制面板的指标。

  7. 将目录、数据库、表、分区和连接指标添加到 CloudWatch 图表。

    CloudWatch 控制面板中的 AWS Glue Data Catalog 指标

您可以配置自定义警报,以在 API 使用量超过您定义的阈值时自动触发,从而识别异常的数据目录使用情况。

有关设置警报的详细说明,请参阅创建 Metrics Insights CloudWatch 警报