Amazon CloudWatch에서 Data Catalog 사용량 지표 모니터링 - AWS Glue
Data Catalog 지표의 개요CloudWatch 대시보드에 지표 추가

Amazon CloudWatch에서 Data Catalog 사용량 지표 모니터링

Amazon CloudWatch에서 AWS Glue Data Catalog 사용량 지표가 이제 제공되므로 Data Catalog의 리소스 사용률 모니터링 및 이해가 간소화됩니다. 이제 카탈로그, 데이터베이스, 테이블, 파티션 및 연결의 Glue Catalog API 사용량을 즉시 확인할 수 있으므로 Data Catalog를 더욱 쉽게 감독할 수 있습니다.

Data Catalog 지표의 개요

AWS Glue Data Catalog는 사용량 지표를 Amazon CloudWatch에 자동으로 게시합니다. CloudWatch 지표 통합을 사용하면 다음을 포함하여 1분마다 중요한 성능 지표를 추적할 수 있습니다.

  • 테이블 요청

  • 생성된 파티션 인덱스

  • 업데이트된 연결

  • 업데이트된 통계

이러한 지표는 병목 현상을 식별하고, 이상을 감지하고, 데이터에 기반한 결정을 내려 전체 데이터 카탈로그의 신뢰성을 개선하는 데 도움이 됩니다. 지표가 지정된 임계값을 초과할 때 알림을 수신하도록 CloudWatch 경보를 설정하여 배포를 선제적으로 관리할 수도 있습니다.

CloudWatch 대시보드에 지표 추가

사용자 지정 대시보드를 생성하여 AWS Glue Data Catalog 리소스를 모니터링하고 경보를 설정하여 비정상적인 활동에 대한 알림을 받을 수 있습니다.

다음 단계를 따라 CloudWatch 대시보드에 Data Catalog 지표를 추가할 수 있습니다.

  1. https://console.aws.amazon.com/cloudwatch/에서 CloudWatch 콘솔을 엽니다.

  2. 탐색 창에서 지표를 선택합니다.

  3. 모든 지표를 선택합니다.

  4. 사용량>AWS 리소스 기준을 선택합니다.

  5. Glue를 기준으로 필터링하여 사용 가능한 지표를 확인합니다.

  6. 대시보드에 추가하려는 지표를 선택합니다.

  7. 카탈로그, 데이터베이스, 테이블, 파티션 및 연결에 대한 지표를 CloudWatch 그래프에 추가합니다.

    CloudWatch 대시보드의 AWS Glue Data Catalog 지표

API 사용량이 정의된 임계값을 초과할 때 자동으로 트리거되는 사용자 지정 경보를 구성하여 데이터 카탈로그 사용량의 이상 징후를 식별할 수 있습니다.

경보 설정에 대한 구체적인 지침은 Metrics Insights CloudWatch 경보 생성을 참조하세요.