View a markdown version of this page

オンデマンド評価 - Amazon Bedrock AgentCore

オンデマンド評価

オンデマンド評価では、選択したスパンのセットを直接分析することで、特定のエージェントのインタラクションを柔軟に評価できます。本番トラフィックを継続的にモニタリングするオンライン評価とは異なり、オンデマンド評価では、選択したインタラクションのターゲットを絞った評価をいつでも実行できます。

オンデマンド評価では、スパン ID またはトレース IDs を指定して、評価する正確なスパンまたはトレースを指定します。その後、カスタムエバリュエーター組み込みエバリュエーターなど、オンライン評価で使用できるのと同じ包括的な評価方法を適用できます。この評価タイプは、特定の顧客とのやり取りを調査したり、報告された問題の修正を検証したり、品質向上のために履歴データを分析したりする必要がある場合に特に役立ちます。評価リクエストを送信すると、サービスは指定されたスパンのみを処理し、分析の詳細な結果を提供します。

この評価タイプは、評価するインタラクションを正確に制御することでオンライン評価を補完し、重点的な品質評価と問題調査のための効果的なツールとなります。