Anzeigen von Versuchsergebnissen im Dashboard - Amazon CloudWatch

Anzeigen von Versuchsergebnissen im Dashboard

Wichtig

Hinweis zum Ende des Supports: Am 16. Oktober 2025 stellt AWS den Support für CloudWatch Evidently ein. Nach dem 16. Oktober 2025 können Sie nicht mehr auf die Evidently-Konsole oder die Evidently-Ressourcen zugreifen.

Sie können die statistischen Ergebnisse eines Experiments sehen, während es läuft und nachdem es abgeschlossen ist. Die Ergebnisse eines Experiments sind bis zu 63 Tage nach dem Start des Experiments verfügbar. Danach sind sie aufgrund von CloudWatch-Richtlinien zur Datenaufbewahrung nicht mehr verfügbar.

Es werden keine statistischen Ergebnisse angezeigt, bis jede Variante mindestens 100 Ereignisse aufweist.

Evidently führt am Ende des Experiments eine zusätzliche Offline-p-Wert-Analyse durch. Offline-p-Wert-Analysen können in einigen Fällen, in denen die während des Experiments verwendeten zeitunabhängigen p-Werte keine statistische Signifikanz finden, statistische Signifikanz erkennen.

Weitere Informationen darüber, wie CloudWatch Evidently die Experimentergebnisse berechnet, finden Sie unter Ergebnisberechnung von Evidently.

Die Ergebnisse eines Experiments ansehen
  1. Öffnen Sie die CloudWatch-Konsole unter https://console.aws.amazon.com/cloudwatch/.

  2. Wählen Sie im Navigationsbereich Application Signals, Evidently.

  3. Wählen Sie den Namen des Projekts aus, das das Experiment enthält.

  4. Wechseln Sie zur Registerkarte Experiments (Experimente).

  5. Wählen Sie den Namen des Experiments und dann die Registerkarte Results (Ergebnisse).

  6. Bei Variation performance (Leistung der Variante) gibt es ein Steuerelement, mit dem Sie auswählen können, welche Experimentstatistiken angezeigt werden sollen. Wenn Sie mehr als eine Statistik auswählen, zeigt Evidently ein Diagramm und eine Tabelle für eine jede Statistik an.

    Die einzelnen Diagramme und Tabellen zeigen die bisherigen Ergebnisse des Experiments an.

    Die Diagramme können die folgenden Ergebnisse anzeigen. Sie können mit dem Steuerelement rechts neben dem Diagramm bestimmen, welches der folgenden Elemente angezeigt wird:

    • Die Anzahl der für jede Variante aufgezeichneten Benutzersitzungsereignisse.

    • Der Durchschnittswert der Metrik der einzelnen Varianten, die oben im Diagramm ausgewählt wird.

    • Das statistische Gewicht der Experimente. Hier wird die Differenz für die oben im Diagramm ausgewählte Metrik mit der Standardvariante und allen anderen Varianten verglichen.

    • Das obere und untere Vertrauensniveau von 95 % begrenzt die Differenz der ausgewählten Metrik zwischen jeder Variante und der Standardvariante.

    Die Tabelle hat eine Zeile pro Variante. Für jede Variante, die nicht die Standardvariante ist, zeigt Evidently an, ob es genügend Daten erhalten hat und die Ergebnisse dadurch statistisch aussagekräftig sind. Sie sehen auch, ob die Verbesserung des statistischen Werts durch die Veränderung ein Vertrauensniveau von 95 % erreicht hat.

    Zu guter Letzt sehen Sie in der Spalte Result (Ergebnis) eine Empfehlung, welche Variante basierend auf dieser Statistik am besten abschneidet bzw. ob es sich nicht eindeutig sagen lässt.