ダッシュボードへのアクセスを有効にするテスト実行の概要グラフ不合格の上位のテスト上位の失敗ステップタイプ平均実行期間ほとんどの失敗があるフロー

テストとシミュレーションダッシュボード

テストおよびシミュレーションダッシュボードは、Amazon Connect フロー全体の自動テストの品質と有効性をモニタリングするのに役立ちます。テスト実行量、成功率と失敗率、平均テスト実行期間、失敗パターンなどの主要なメトリクスをステップタイプ別に追跡できます。ダッシュボードを使用して、失敗した上位のテストとフローを特定し、ベンチマーク期間とパフォーマンスを比較し、時間の経過に伴う実行傾向を表示します。テストケース、フロー、チャネル、または時間範囲でフィルタリングして検証戦略を最適化し、本番デプロイ前に品質を確保します。

ダッシュボードへのアクセスを有効にする

ユーザーに適切なセキュリティプロファイルのアクセス許可が割り当てられていることを確認します。

[メトリクスへのアクセス - アクセス] アクセス許可または [ダッシュボード - アクセス] アクセス許可。動作の違いについては、「Amazon Connect でダッシュボードとレポートを表示するアクセス許可を割り当てる」を参照してください。
テスト管理 > テストケース - アクセス許可の表示: ダッシュボードでデータを表示するには、このアクセス許可が必要です。

注記

ダッシュボードを表示するには、テストケース - 表示アクセス許可が必要です

テスト実行の概要グラフ

テスト実行概要グラフには、選択したフィルターに基づいて集計されたメトリクスが表示されます。各メトリクスは、「比較」ベンチマークの時間範囲フィルターと比較されます。例えば、選択した時間範囲内のテスト実行の合計が 103 の場合、完了したテスト実行が 139 件というベンチマークと比較して 26% 減少します。パーセンテージは最も近い整数に四捨五入されます。赤色は、ベンチマークと比較してパフォーマンスが低いことを示します。

このグラフの例を以下の図に示します。

このグラフには、次のメトリクスが表示されます。

テスト実行の合計: 指定された時間範囲内で開始されたテスト実行の数。
テストの成功率: 成功した結果で完了したテスト実行の割合。
テスト失敗率: 失敗した結果で完了したテスト実行の割合。
平均テスト実行期間: 正常に開始および完了したすべてのテスト実行の平均期間。

不合格の上位のテスト

Top Failing Tests チャートには、障害率が最も高いテストケースが表示されます。

このグラフには、次のメトリクスが表示されます。

上位失敗率: 特定のテストケースごとに失敗したテスト実行の割合。

上位の失敗ステップタイプ

Top Failing Step Type チャートには、テストケースステップタイプ別の失敗の内訳が表示されます。初期化のテスト、イベントの監視、指示の送信、データのアサート、システム動作の上書きの 5 つのステップタイプがあります。各ステップタイプは、テストケース内でシミュレートするインタラクションの詳細な設定を表します。

このグラフには、次のメトリクスが表示されます。

テストケースのステップタイプ: これらのステップタイプは、テストケース内で設定された詳細なシミュレートされたインタラクションを表します。シミュレートされた各インタラクションには「イベントの監視」が必要であり、オプションで「指示の送信」、「アサートデータ」、「システム動作の上書き」設定を含めることができます。テスト初期化は、各テストケース実行の開始時に実行されます。
テストケースの失敗率: 特定のテストケースステップタイプごとの失敗の割合。