Invites de l’évaluateur utilisées dans une tâche d’évaluation RAG - Amazon Bedrock

Invites de l’évaluateur utilisées dans une tâche d’évaluation RAG

Les mêmes invites sont utilisées pour les tâches d’évaluation de récupération uniquement et de récupération et génération. Toutes les invites contiennent un composant chat_history facultatif. Si conversationTurns est spécifié, chat_history est inclus dans l’invite.

Des doubles accolades {{}} sont utilisées pour indiquer où les données de votre jeu de données d’invite sont insérées.

  • {{chat_history}} : cela représente l’historique de la conversation indiquée dans conversationTurns. Pour chaque tour, l’invite suivante est modifiée dans chat_history.

  • {{prompt}} : invite de votre jeu de données d’invite

  • {{ground_truth}} : vérité terrain à partir de votre jeu de données d’invite

  • {{prediction}} : sortie finale du LLM dans votre système RAG