Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.
Peticiones del evaluador utilizadas en un trabajo de evaluación de RAG
Se utilizan las mismas peticiones para los trabajos de evaluación de solo recuperación y de recuperación y generación. Todas las peticiones contienen un componente chat_history opcional. Si se especifica conversationTurns, chat_history se incluye en la petición.
Se utilizan corchetes dobles {{}} para indicar dónde se insertan los datos del conjunto de datos de peticiones.
-
{{chat_history}}: representa el historial de la conversación indicada enconversationTurns. Para cada turno, la siguiente petición se añade alchat_history. -
{{prompt}}: la petición del conjunto de datos de peticiones -
{{ground_truth}}: los datos de referencia del conjunto de datos de peticiones -
{{prediction}}: la salida final del LLM en su sistema RAG
Temas
