翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
# AI エージェントのパフォーマンスダッシュボード
**AI エージェントのパフォーマンスダッシュボード**を使用して、AI エージェントのパフォーマンスを表示し、AI エージェント間および時間の経過とともにインサイトを得ることができます。
ダッシュボードには、集約された AI エージェントのパフォーマンスを 1 か所で表示できます。ダッシュボードを使用して、呼び出し数、レイテンシー、成功率などの AI エージェントメトリクスを表示します。
**Topics**
+ [ダッシュボードへのアクセスを有効にする](#enable-ai-agent-performance-dashboard)
+ [[時間範囲] と [次と比較:] ベンチマークを指定する](#ai-agents-timerange)
+ [セルフサービス AI パフォーマンスの概要](#self-service-ai-agent-performance-summary)
+ [エージェント支援 AI パフォーマンスの概要](#ai-agent-assistance-performance-summary-dashboard)
+ [AI エージェントのパフォーマンス](#ai-agents-performance)
+ [呼び出し成功率別の AI エージェント](#ai-agents-by-invocation-success-chart)
+ [ナレッジベースの使用状況](#knowledge-base-usage)
+ [AI エージェントのパフォーマンスの傾向](#ai-agent-performance-trend)
+ [AI ツールの使用](#ai-tools-usage)
+ [AI プロンプトのパフォーマンス](#ai-prompt-performance)
+ [プロアクティブインテントの傾向](#proactive-intents-trend)
+ [呼び出しレイテンシーによる AI プロンプト](#ai-prompts-by-invocation-latency)
+ [呼び出し成功率による AI プロンプト](#ai-prompts-by-invocation-success-rate)
## ダッシュボードへのアクセスを有効にする
ユーザーに適切なセキュリティプロファイルのアクセス許可が割り当てられていることを確認します。
**[メトリクスへのアクセス - アクセス] アクセス許可**または **[ダッシュボード - アクセス] アクセス許可**。動作の違いについては、「[Amazon Connect でダッシュボードとレポートを表示するアクセス許可を割り当てる](dashboard-required-permissions.md)」を参照してください。
AI エージェントのパフォーマンスダッシュボードにアクセスするには、次のセキュリティプロファイルのアクセス許可の少なくとも 1 つが必要です。
+ **AI エージェントデザイナー - AI エージェント**ビューのアクセス許可
+ **AI エージェントデザイナー - AI プロンプト**ビューのアクセス許可
+ **AI エージェントデザイナー - AI ガードレール**ビューのアクセス許可
+ **エージェントアプリケーション - 接続アシスタント**ビューのアクセス許可
ダッシュボードは、**分析と最適化 > 分析ダッシュボード > AI エージェントのパフォーマンス**で利用できます。
## [時間範囲] と [次と比較:] ベンチマークを指定する
**時間範囲**フィルターを使用して、ダッシュボードでデータを表示する日付と期間を指定します。
デフォルトでは、ダッシュボードには先週のデータが表示されます。時間範囲をカスタマイズして、過去 15 分間の最新データを表示するか、過去 3 か月までさかのぼってデータを表示できます。
**比較**を使用してフィルタリングし、現在のデータを比較する期間を選択します。これにより、傾向を特定し、時間の経過とともに改善や問題を追跡できます。
## セルフサービス AI パフォーマンスの概要
このセクションでは、AI エージェントが開始したセルフサービスインタラクションの状態を示します。選択した期間の次の主要メトリクスが「セルフサービス」のユースケースでフィルタリングされて表示されます。
+ **AI 関連の問い合わせ**:
AI エージェントが人間のエージェントを関与させずに顧客の問い合わせを解決した、対応した問い合わせの合計数。
+ **アクティブな AI エージェント**:
一意の AI エージェントの合計数。各エージェントは名前とバージョンの一意の組み合わせで識別されます。
+ **レスポンスの完了率**:
受信リクエストへの応答に成功した AI エージェントセッションの割合。
+ **ハンドオフレート**:
人間のエージェントなど、追加のサポートが必要とマークされた AI エージェントによって処理されたセルフサービス問い合わせの割合。
+ **目標成功率**:
AI エージェントが顧客の問題を解決したセッションの割合。値は 0～1 で、1 はすべてのセッションで解決が成功したことを示します。
+ **忠実度スコア**:
メッセージやツールコールの結果など、会話コンテキストに忠実であり続ける AI エージェントレスポンスの割合。値は 0～1 で、1 は完全なコンテキスト忠実度を示します。
次の図は、**セルフサービス AI のパフォーマンス概要**グラフの例を示しています。
## エージェント支援 AI パフォーマンスの概要
このウィジェットは、AI が人間のエージェントをサポートしているエージェントアシストインタラクションの状態を示しています。「エージェント支援」のユースケースでフィルタリングされた、選択した期間の次の主要メトリクスが表示されます。
+ **AI 関連の問い合わせ**:
AI エージェントが顧客の問い合わせを解決するために人間のエージェントを支援した問い合わせの合計数。
+ **アクティブな AI エージェント**:
一意の AI エージェントの合計数。各エージェントは名前とバージョンの一意の組み合わせで識別されます。
+ **レスポンスの完了率**:
受信リクエストへの応答に成功した AI エージェントセッションの割合。
+ **プロアクティブインテントエンゲージメント率**:
人間のエージェントがクリックした、検出されたプロアクティブインテントの割合。
+ **忠実度スコア**:
メッセージやツールコールの結果など、会話コンテキストに忠実であり続ける AI エージェントレスポンスの割合。値は 0～1 で、1 は完全なコンテキスト忠実度を示します。
次の図は、**エージェント支援 AI パフォーマンス概要**グラフの例を示しています。
## AI エージェントのパフォーマンス
この表は、ユースケースから個々のエージェントバージョンまでの AI エージェントのパフォーマンスとその主要なパフォーマンスメトリクスのドリルダウンビューを示しています。
この表には、2 つのレベルでパフォーマンスメトリクスが表示されます。
+ **AI ユースケースレベル**:
ユースケース内のすべてのエージェントバージョンに集約されたメトリクス (エンドカスタマーセルフサービス、エージェントサポート）。
+ **AI エージェントのバージョンレベル**:
エージェントバージョンごとの個々のパフォーマンスメトリクス。
ユースケースの行を展開または折りたたんで、特定のエージェントバージョンにドリルダウンできます。各バージョンが全体的なユースケースのパフォーマンスにどのように影響するかを確認するには、各エージェントバージョン行の個々のメトリクスを表示します。
**表示されるメトリクス:**
+ **AI エージェント呼び出し数**:
AI エージェントバージョンが呼び出された合計回数。
+ **AI エージェント呼び出しの成功率**:
正常に実行された AI エージェント呼び出しの割合。
+ **[平均 AI エージェントの会話は次のように変わります**。
AI エージェントが結果を得るために取った会話の平均回数。
+ **便利なレスポンス**:
サムアップに役立つと評価された AI 提案の数。
+ **役に立たないレスポンス**:
サムダウンで役に立たないと評価された AI 提案の数。
+ **ツール使用率の精度**:
AI エージェントによる正しいツール使用率。値は 0～1 で、1 は完全な使用率を示します。
+ **ツール選択の精度**:
AI エージェントによる正しいツール選択のレート。値は 0～1 で、1 は最適な選択を示します。
+ **ツールパラメータの精度**:
AI エージェントが正しいパラメータを提供したツール呼び出しのレート。値は 0～1 で、1 は完全なパラメータ精度を示します。
次の図は、**AI エージェントのパフォーマンス**テーブルの例を示しています。
## 呼び出し成功率別の AI エージェント
呼び出し成功率による AI エージェントグラフには、各 AI エージェントの呼び出し成功率が表示されます。このグラフから直接特定の AI エージェント、AI エージェントタイプ、AI ユースケース、またはその他のディメンションをフィルタリングすることで、このウィジェットをさらに設定できます。
次の図は、**呼び出し成功率グラフによる AI エージェント**の例を示しています。
## ナレッジベースの使用状況
この表は、AI エージェントによって参照されるナレッジベース記事のドリルダウンビューを示しています。AI エージェントタイプと AI エージェント行別に展開して、特定のナレッジベース名にドリルダウンし、ナレッジベースが AI エージェントによって参照された回数を確認できます。
**表示されるメトリクス:**
+ **参照数** – 記事が AI エージェントによって参照された回数。
次の図は、**ナレッジベースの使用状況**テーブルの例を示しています。
## AI エージェントのパフォーマンスの傾向
AI エージェントのパフォーマンス傾向は、特定の期間 (15 分、毎日、毎週、毎月) における AI エージェント呼び出しの成功率 (青い棒）、忠実度スコア (赤い線）、ツール使用率の精度 (緑の線) を間隔 (15 分、毎日、毎週、毎月) 別に表示する時系列グラフです。[間隔] ボタンを使用して、ウィジェットで直接さまざまな時間範囲の間隔を設定できます。選択できる間隔は、ページレベルの時間範囲フィルターによって異なります。
例えば、次のようになります。
+ ダッシュボードの上部に「今日」の時間範囲フィルターがある場合、表示されるのは、過去 24 時間の 15 分間隔のみです。
+ ダッシュボードの上部に「日」の時間範囲フィルターがある場合は、直近 8 日間隔の傾向、または直近 24 時間の 15 分間隔の傾向を表示できます。
+ ダッシュボードの上部に「週」時間範囲フィルターがある場合は、毎日または毎週の間隔の傾向を確認できます。
+ ダッシュボードの上部に「月」時間範囲フィルターがある場合は、日単位または月単位の間隔の傾向を確認できます。
次の図は、**AI エージェントのパフォーマンス傾向**グラフの例を示しています。
## AI ツールの使用
この表は、呼び出しに対するツールの実装 (例: MCP - Model Context Protocol、Return-to-Control)、平均レイテンシーと呼び出し成功率、ツール使用率の精度を比較したものです。
たとえば、AI エージェントタイプ (オーケストレーションや回答の推奨事項など) を選択し、そのエージェントタイプ内でさまざまなツールとそのバージョンがどのように動作しているかを表示できます。AI ツール**呼び出し数、AI ツール呼び出し****の成功率**、または**平均を使用して列をソートすることで、最適化が必要なツールバージョンを特定できます。AI ツールの呼び出しレイテンシー**。
この表には、3 つのレベルでパフォーマンスメトリクスが表示されます。
+ **AI エージェントタイプレベル**:
エージェントタイプ内のすべてのツールとバージョンにわたって集計されたメトリクス。
+ **AI ツールタイプレベル**:
特定のツールタイプのすべてのバージョンの集計メトリクス。
+ **AI ツール**:
各ツールバージョンの個々のパフォーマンスメトリクス。
AI エージェントタイプとツールタイプの行を展開または折りたたんで、特定のツールバージョンにドリルダウンできます。各バージョンがツールタイプの全体的なパフォーマンスにどのように影響するかを確認するには、各ツールバージョン行の個々のメトリクスを表示します。
**表示されるメトリクス:**
+ **AI ツール呼び出し数**:
AI ツールバージョンが呼び出された合計回数。
+ **[平均 AI ツールの呼び出しレイテンシー**:
ツールバージョンのミリ秒単位の平均呼び出しレイテンシー。
+ **AI ツール呼び出しの成功率**:
正常に実行された AI ツール呼び出しの割合。
+ **ツール使用率の精度**:
AI エージェントによる正しいツール使用率。値は 0～1 で、1 は完全な使用率を示します。
+ **ツール選択の精度**:
AI エージェントによる正しいツール選択のレート。値は 0～1 で、1 は最適な選択を示します。
+ **ツールパラメータの精度**:
AI エージェントが正しいパラメータを提供したツール呼び出しのレート。値は 0～1 で、1 は完全なパラメータ精度を示します。
次の図は、**AI ツールの使用**テーブルの例を示しています。
## AI プロンプトのパフォーマンス
この表は、AI プロンプトのパフォーマンスのドリルダウンビューを示しています。AI エージェントタイプとプロンプトタイプの行を展開して、特定のプロンプトバージョンにドリルダウンできます。各バージョンがプロンプトタイプの全体的なパフォーマンスにどのように影響するかを確認するには、各プロンプトバージョン行の個々のメトリクスを表示します。
この表には、3 つのレベルでパフォーマンスメトリクスが表示されます。
+ **AI エージェントタイプレベル**:
AI エージェントタイプのすべてのプロンプトとバージョンに集約されたメトリクス。
+ **AI プロンプトタイプレベル**:
特定の AI プロンプトタイプのすべてのバージョンの集計メトリクス。
+ **AI プロンプトのバージョンレベル**:
各 AI プロンプトバージョンの個々のパフォーマンスメトリクス。
**表示されるメトリクス:**
+ **AI プロンプトの呼び出し数**:
AI プロンプトバージョンが呼び出された合計回数。
+ **AI プロンプト呼び出しの成功率**:
正常に実行された AI プロンプト呼び出しの割合。
+ **[平均 AI プロンプトの呼び出しレイテンシー**:
AI プロンプトバージョンの平均呼び出しレイテンシーをミリ秒単位で表します。
ページフィルターの使用に加えて、特定の AI エージェント、AI プロンプト、時間範囲、またはその他のディメンションのフィルターをテーブルに追加できます。
次の図は、**AI プロンプトのパフォーマンス**テーブルの例を示しています。
## プロアクティブインテントの傾向
プロアクティブインテントの傾向グラフには、特定の期間 (15 分、毎日、毎週、毎月) に分割されたプロアクティブインテントの検出率 (青いバー）、プロアクティブインテントのエンゲージメント率 (赤い線）、プロアクティブインテントのレスポンス率 (緑の線) が表示されます。[間隔] ボタンを使用して、ウィジェットで直接さまざまな時間範囲の間隔を設定できます。選択できる間隔は、ページレベルの時間範囲フィルターによって異なります。
**表示されるメトリクス:**
+ プロ**アクティブインテントが検出されました**。
エージェントアシスタンスユースケースで AI セッション中に検出されたプロアクティブインテント (顧客クエリ) の数。
+ **プロアクティブインテントエンゲージメント率**:
エージェントアシスタンスユースケースで、人間のエージェントによってクリックまたはエンゲージされた、検出されたプロアクティブインテントの割合。
+ **プロアクティブインテントの応答率**:
エージェントアシスタンスユースケースで、AI エージェントによって正常に達成されたエンゲージメントプロアクティブインテントの割合。
次の図は、**プロアクティブインテントの傾向**グラフの例を示しています。
## 呼び出しレイテンシーによる AI プロンプト
呼び出しレイテンシーによる AI プロンプトのグラフには、各 AI プロンプトの平均呼び出しレイテンシーがミリ秒単位で表示されます。このグラフから直接特定の AI プロンプト、AI プロンプトタイプ、AI エージェント、AI エージェントタイプ、AI ユースケース、またはその他のディメンションをフィルタリングすることで、このウィジェットをさらに設定できます。
次の図は、**呼び出しレイテンシーグラフによる AI プロンプト**の例を示しています。
## 呼び出し成功率による AI プロンプト
呼び出し成功率による AI プロンプトのグラフには、各 AI プロンプトの呼び出し成功率が表示されます。このグラフから直接特定の AI プロンプト、AI プロンプトタイプ、AI エージェント、AI エージェントタイプ、AI ユースケース、またはその他のディメンションをフィルタリングすることで、このウィジェットをさらに設定できます。
次の図は、**呼び出し成功率グラフによる AI プロンプト**の例を示しています。
