Utilizzo delle metriche per comprendere le prestazioni del sistema RAG

Quando si esegue un processo di valutazione RAG, il modello di valutazione selezionato utilizza una serie di metriche per caratterizzare le prestazioni dei sistemi RAG oggetto di valutazione. Amazon Bedrock offre una serie di metriche integrate tra cui scegliere, in alternativa puoi definire metriche personalizzate.

Le valutazioni RAG di Amazon Bedrock offrono due tipi di processi di valutazione, solo recupero e recupero e generazione. Ogni tipo di processo dispone di un proprio set di metriche integrate tra cui è possibile scegliere.

Nelle tabelle seguenti sono elencate le metriche integrate disponibili per ogni tipo di valutazione. Per ulteriori informazioni sull’utilizzo di metriche personalizzate per i processi di valutazione RAG, consulta Creare un prompt per un parametro personalizzato.