RAG 評価ジョブで使用する評価プロンプト - Amazon Bedrock

RAG 評価ジョブで使用する評価プロンプト

retrieve-only の評価ジョブと retrieve-and-generate の評価ジョブでは、同じプロンプトが使用されます。すべてのプロンプトには、オプションの chat_history コンポーネントが含まれます。conversationTurns が指定されている場合、chat_history がプロンプトに含まれます。

二重中括弧 {{}} は、プロンプトデータセットのデータが挿入される場所を示すために使用されます。

  • {{chat_history}} – これは、conversationTurns で示される会話履歴を表します。ターンごとに、次のプロンプトが chat_history で修正されます。

  • {{prompt}} – プロンプトデータセットからのプロンプト

  • {{ground_truth}} – プロンプトデータセットからのグラウンドトゥルース

  • {{prediction}} — RAG システムの LLM からの最終出力

トピック