Creazione di un set di dati dei prompt per una valutazione RAG in Amazon Bedrock

Per valutare il recupero e la generazione in Knowledge Base per Amazon Bedrock o in un sistema di generazione potenziata da recupero dati (RAG), fornisci un set di dati dei prompt. Quando fornisci dati di risposta dal tuo sistema RAG, Amazon Bedrock salta la fase di invocazione della knowledge base ed esegue il processo di valutazione direttamente sui tuoi dati.

I set di dati dei prompt devono essere archiviati in Amazon S3 e devono utilizzare il formato di riga JSON e l’estensione del file .jsonl. Ogni riga deve essere un oggetto JSON valido. Nel set di dati possono essere presenti fino a 1.000 prompt per processo di valutazione. Per i processi di valutazione di recupero e generazione, il numero massimo di turni per ogni conversazione è cinque. Per le valutazioni di solo recupero, puoi specificare un solo turno.

Per i processi creati utilizzando la console, devi aggiornare la configurazione Cross Origin Resource Sharing (CORS) sul bucket S3. Per ulteriori informazioni sulle autorizzazioni CORS necessarie, consulta Autorizzazioni CORS (Cross Origin Resource Sharing) richiesta per i bucket S3.

Consulta i seguenti argomenti per saperne di più sulle coppie chiave-valore necessarie in base al tipo di processo di valutazione selezionato.