RAG 평가 작업에 사용되는 평가자 프롬프트 - Amazon Bedrock

RAG 평가 작업에 사용되는 평가자 프롬프트

동일한 프롬프트가 검색 전용 및 retrieve-and-generate 평가 작업에 사용됩니다. 모든 프롬프트에는 선택적 chat_history 구성 요소가 포함되어 있습니다. conversationTurns를 지정하면 chat_history가 프롬프트에 포함됩니다.

이중 중괄호 {{}}는 프롬프트 데이터세트의 데이터가 삽입되는 위치를 나타내는 데 사용됩니다.

  • {{chat_history}} - conversationTurns에 표시된 대화 기록을 나타냅니다. 턴마다 다음 프롬프트가 chat_history로 수정됩니다.

  • {{prompt}} - 프롬프트 데이터세트의 프롬프트

  • {{ground_truth}} - 프롬프트 데이터세트의 실제 데이터

  • {{prediction}} - RAG 시스템의 LLM에서 최종 출력

주제