Uso de métricas para conocer el rendimiento del modelo

Cuando ejecuta un trabajo de evaluación de modelos con un juez, el modelo evaluador que seleccione utiliza un conjunto de métricas para caracterizar el rendimiento de los sistemas de los modelos que se están evaluando. Amazon Bedrock ofrece una serie de métricas integradas entre las que puede elegir o puede definir las suyas propias.

En la siguiente tabla se muestran las métricas integradas disponibles en Amazon Bedrock para los trabajos de evaluación que utilizan un LLM como juez. Para obtener más información sobre el uso de métricas personalizadas, consulte Creación de una petición para una métrica personalizada y Creación de un trabajo de evaluación del modelo mediante métricas personalizadas.