Peticiones del evaluador utilizadas en un trabajo de evaluación de RAG - Amazon Bedrock

Peticiones del evaluador utilizadas en un trabajo de evaluación de RAG

Se utilizan las mismas peticiones para los trabajos de evaluación de solo recuperación y de recuperación y generación. Todas las peticiones contienen un componente chat_history opcional. Si se especifica conversationTurns, chat_history se incluye en la petición.

Se utilizan corchetes dobles {{}} para indicar dónde se insertan los datos del conjunto de datos de peticiones.

  • {{chat_history}}: representa el historial de la conversación indicada en conversationTurns. Para cada turno, la siguiente petición se añade al chat_history.

  • {{prompt}}: la petición del conjunto de datos de peticiones

  • {{ground_truth}}: los datos de referencia del conjunto de datos de peticiones

  • {{prediction}}: la salida final del LLM en su sistema RAG

Temas