Valutazione automatica del modello - Amazon SageMaker AI

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Valutazione automatica del modello

Puoi creare una valutazione automatica del modello in Studio o utilizzando la libreria fmeval all’interno del tuo codice. Studio utilizza una procedura guidata per creare il processo di valutazione del modello. La libreria fmeval fornisce strumenti per personalizzare ulteriormente il flusso di lavoro.

Entrambi i tipi di processi di valutazione automatica dei modelli supportano l'uso di JumpStart modelli disponibili pubblicamente e JumpStart di modelli precedentemente distribuiti su un endpoint. Se ne utilizzi uno JumpStart che non è stato precedentemente distribuito, l' SageMaker intelligenza artificiale si occuperà della creazione delle risorse necessarie e della loro chiusura una volta terminato il processo di valutazione del modello.

Per utilizzare il testo basato su LLMs un altro AWS servizio o su un modello ospitato all'esternoAWS, è necessario utilizzare la fmeval libreria.

Una volta completati i processi, i risultati vengono salvati nel bucket Amazon S3 specificato al momento della creazione del processo. Per informazioni su come interpretare i risultati, consulta Informazioni sui risultati del processo di valutazione del modello.