Überwachen der Data-Catalog-Nutzungsmetriken in Amazon CloudWatch - AWS Glue

Überwachen der Data-Catalog-Nutzungsmetriken in Amazon CloudWatch

AWS Glue Data Catalog-Nutzungsmetriken sind jetzt mit Amazon CloudWatch verfügbar, was die Überwachung und das Verständnis der Ressourcennutzung in Ihrem Datenkatalog vereinfacht. Sie haben jetzt sofort Einblick in die Nutzung von Katalogen, Datenbanken, Tabellen, Partitionen und Verbindungen durch Ihre Glue-Catalog-API, was es einfacher macht, den Überblick über Ihren Datenkatalog zu behalten.

Überblick über die Data-Catalog-Metriken

AWS Glue Data Catalog veröffentlicht automatisch Nutzungsmetriken für Amazon CloudWatch. Mit der Integration von CloudWatch-Metriken können Sie jede Minute wichtige Leistungsindikatoren verfolgen, darunter die folgenden:

  • Tabellenanforderungen

  • Erstellte Partitionsindizes

  • Aktualisierte Verbindungen

  • Aktualisierte Statistiken

Diese Metriken helfen Ihnen dabei, Engpässe zu identifizieren, Anomalien zu erkennen und datengestützte Entscheidungen zu treffen, um die allgemeine Zuverlässigkeit des Datenkatalogs zu verbessern. Sie können auch CloudWatch-Alarme einrichten, um benachrichtigt zu werden, wenn Metriken bestimmte Schwellenwerte überschreiten, sodass Sie Ihre Bereitstellung proaktiv verwalten können.

Hinzufügen von Metriken zu Ihrem CloudWatch-Dashboard

Sie können benutzerdefinierte Dashboards erstellen, um Ihre AWS Glue Data Catalog-Ressourcen zu überwachen, und Alarme einrichten, um über ungewöhnliche Aktivitäten informiert zu werden.

Sie können mit den folgenden Schritten Ihrem CloudWatch-Dashboard Data-Catalog-Metriken hinzufügen:

  1. Öffnen Sie die CloudWatch-Konsole unter https://console.aws.amazon.com/cloudwatch/.

  2. Wählen Sie im Navigationsbereich Metriken aus.

  3. Wählen Sie Alle Metriken aus.

  4. Wählen Sie Nutzung > Nach AWS-Ressource aus.

  5. Filtern Sie nach Glue, um die verfügbaren Metriken zu sehen.

  6. Wählen Sie die Metriken aus, die dem Dashboard hinzugefügt werden sollen.

  7. Fügen Sie Ihrem CloudWatch-Diagramm Metriken für Kataloge, Datenbanken, Tabellen, Partitionen und Verbindungen hinzu.

    AWS Glue Data Catalog-Metriken im CloudWatch-Dashboard

Sie können benutzerdefinierte Alarme konfigurieren, die automatisch ausgelöst werden, wenn die API-Nutzung Ihre definierten Schwellenwerte überschreitet, um Auffälligkeiten bei der Nutzung Ihres Datenkatalogs zu identifizieren.

Detaillierte Anweisungen zum Einrichten von Alarmen finden Sie unter Erstellen eines CloudWatch- Alarms für Metrics Insights.