Prompts do avaliador usados em um trabalho de avaliação de RAG - Amazon Bedrock

Prompts do avaliador usados em um trabalho de avaliação de RAG

Os mesmos prompts são usados para trabalhos de avaliação somente de recuperação e de recuperação e geração. Todos os prompts contêm um componente chat_history opcional. Se conversationTurns for especificado, chat_history será incluído no prompt.

Chaves duplas {{}} são usadas para indicar onde os dados do conjunto de dados de prompts são inseridos.

  • {{chat_history}}: representa o histórico de conversas indicado em conversationTurns. Para cada turno, o prompt seguinte é alterado para chat_history.

  • {{prompt}}: o prompt do conjunto de dados de prompts.

  • {{ground_truth}}: a verdade de referência do conjunto de dados de prompts.

  • {{prediction}}: a saída final do LLM no sistema de RAG.

Tópicos