Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.
Métricas de agentes de IA
Las siguientes métricas están disponibles para supervisar el rendimiento de los agentes de IA. Para obtener información sobre la creación de agentes de IA, consulte Crear agentes de IA. Para obtener información sobre la creación de mensajes de IA, consulte Crear mensajes de IA. Para obtener información sobre las herramientas MCP de los agentes de IA, consulte. Herramientas MCP para agentes de IA
Contenido
Agentes de IA activos
Esta métrica mide el número total de agentes de IA únicos, y cada agente de IA se identifica por su combinación única de nombre y versión.
-
Tipo de métrica: entero
-
Categoría métrica: agente de IA
-
GetMetricDataV2 Identificador de métrica de la API:
ACTIVE_AI_AGENTS -
Ubicación del panel: panel de rendimiento de agentes de IA, agentes de IA activos
Invocaciones de agentes de IA
Esta métrica mide el recuento total de invocaciones de agentes de IA en todos los agentes de IA por instancia.
-
Tipo de métrica: entero
-
Categoría de métrica: agente de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_AGENT_INVOCATIONS -
Ubicación del panel: panel de rendimiento de los agentes de IA, recuento de invocaciones de agentes de IA
La invocación de un agente de IA se realizó correctamente
Esta métrica mide el número de invocaciones de agentes de IA que se ejecutaron correctamente sin errores técnicos, como errores de API, tiempos de espera o problemas con el sistema.
-
Tipo de métrica: entero
-
Categoría de métrica: agente de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_AGENT_INVOCATION_SUCCESS
Tasa de éxito de invocación de agentes de IA
Esta métrica mide el porcentaje de invocaciones de agentes de IA que se ejecutaron correctamente sin fallos técnicos.
-
Tipo de métrica: porcentaje
-
Categoría de métrica: agente de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_AGENT_INVOCATION_SUCCESS_RATE -
Ubicación del panel: panel de rendimiento de los agentes de IA, tasa de éxito de invocación de agentes de IA
La respuesta de un agente de IA fue útil
Esta métrica mide el número de sugerencias de IA calificadas como útiles con un pulgar hacia arriba.
-
Tipo de métrica: entero
-
Categoría métrica: agente de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_AGENT_RESPONSE_HELPFUL -
Ubicación del panel: panel de rendimiento de los agentes de IA, útil la respuesta de los agentes de IA
nota
Esta métrica se actualiza cada 6 horas. Esta métrica está disponible como parte de Connect Customer AI.
La respuesta del agente de IA no es útil
Esta métrica mide el número de sugerencias de IA calificadas como inútiles con el pulgar hacia abajo.
-
Tipo de métrica: entero
-
Categoría métrica: agente de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_AGENT_RESPONSE_NOT_HELPFUL -
Ubicación del panel: panel de rendimiento del agente de IA, la respuesta del agente de IA no es útil
nota
Esta métrica se actualiza cada 6 horas. Esta métrica está disponible como parte de Connect Customer AI.
Entregas de IA
Esta métrica mide el recuento total de contactos gestionados por agentes de IA que se convirtieron en agentes humanos. Esta métrica se aplica específicamente a los casos de uso del autoservicio en los que los agentes de IA atienden inicialmente las consultas de los clientes.
-
Tipo de métrica: entero
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_HANDOFFS
Tasa de transferencia de IA
Esta métrica mide el porcentaje de contactos gestionados por agentes de IA que se convirtieron en agentes humanos o recibieron apoyo adicional.
-
Tipo de métrica: porcentaje
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_HANDOFF_RATE -
Ubicación del panel: panel de rendimiento de AI Agent, tasa de transferencia
Tasa de respuesta completa de IA
Esta métrica mide el porcentaje de sesiones de IA que respondieron correctamente a las solicitudes entrantes de los clientes.
-
Tipo de métrica: porcentaje
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_RESPONSE_COMPLETION_RATE -
Ubicación del panel: panel de rendimiento de AI Agent, tasa de respuesta completada
Contactos relacionados con la IA
Esta métrica mide el recuento total de contactos con los clientes en los que participaron agentes de IA, ya sea proporcionando una automatización de autoservicio o ayudando a los agentes humanos a resolver las consultas de los clientes.
-
Tipo de métrica: entero
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_INVOLVED_CONTACTS -
Ubicación del panel: panel de rendimiento de agentes de IA, contactos relacionados con la IA
La invocación de AI Prompt se realizó correctamente
Esta métrica mide el número de invocaciones de AI Prompt que se ejecutaron correctamente sin errores.
-
Tipo de métrica: entero
-
Categoría de métrica: AI Prompt
-
GetMetricDataV2 Identificador de métrica de la API:
AI_PROMPT_INVOCATION_SUCCESS
Tasa de éxito de invocación rápida de IA
Esta métrica mide el porcentaje de invocaciones de AI Prompt que se ejecutaron correctamente.
-
Tipo de métrica: porcentaje
-
Categoría de métrica: AI Prompt
-
GetMetricDataV2 Identificador de métrica de la API:
AI_PROMPT_INVOCATION_SUCCESS_RATE -
Ubicación del panel: panel de rendimiento de los agentes de IA, tasa de éxito de invocaciones rápidas de IA
Invocaciones rápidas de IA
Esta métrica mide el recuento total de invocaciones de AI Prompt.
-
Tipo de métrica: entero
-
Categoría métrica: AI Prompt
-
GetMetricDataV2 Identificador de métrica de la API:
AI_PROMPT_INVOCATIONS -
Ubicación del panel: panel de rendimiento de AI Agent, recuento de invocaciones rápidas de IA
¿Se ha invocado correctamente la herramienta de IA?
Esta métrica mide el número total de invocaciones a herramientas de IA que se ejecutaron correctamente.
-
Tipo de métrica: entero
-
Categoría de métrica: herramienta de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_TOOL_INVOCATION_SUCCESS
Tasa de éxito de invocación de herramientas de IA
Esta métrica mide el porcentaje de invocaciones a herramientas de IA que se ejecutaron correctamente.
-
Tipo de métrica: porcentaje
-
Categoría de métrica: herramienta de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_TOOL_INVOCATION_SUCCESS_RATE -
Ubicación del panel: panel de rendimiento de los agentes de IA, tasa de éxito de invocación de herramientas de IA
Invocaciones a herramientas de IA
Esta métrica mide el recuento total de invocaciones a herramientas de IA.
-
Tipo de métrica: entero
-
Categoría métrica: herramienta de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_TOOL_INVOCATIONS -
Ubicación del panel: panel de rendimiento de agentes de IA, recuento de invocaciones de herramientas de IA
Precisión de los parámetros de la herramienta AI
Esta métrica mide la tasa de invocaciones de herramientas cuando los agentes de IA proporcionaron los parámetros correctos. El valor está entre 0 y 1, donde 1 indica una precisión perfecta de los parámetros.
-
Tipo de métrica: doble
-
Categoría métrica: herramienta de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_TOOL_PARAMETER_ACCURACY -
Ubicación del panel: panel de rendimiento de los agentes de IA, precisión de los parámetros de la herramienta de IA
Criterios de evaluación:
Esta métrica utiliza una LLM-based evaluación automática que analiza los parámetros transferidos a cada llamada a la herramienta en función del contexto de la conversación y las definiciones de los parámetros de la herramienta. Cada llamada a la herramienta se califica como correcta o incorrecta en función de los siguientes criterios:
-
Presencia: ¿Están presentes y correctamente rellenados todos los parámetros necesarios?
-
Precisión: ¿Los valores de los parámetros están justificados de forma explícita por el contexto de la conversación, en lugar de inferirlos o asumirlos?
-
Precisión: ¿Se incluyen parámetros adicionales, irrelevantes o inventados?
nota
Esta métrica se actualiza cada 24 horas. Esta métrica está disponible como parte de Connect Customer AI.
Precisión en la selección de herramientas de IA
Esta métrica mide la tasa de selecciones correctas de herramientas por parte de los agentes de IA. El valor está entre 0 y 1, donde 1 indica una selección óptima.
-
Tipo de métrica: doble
-
Categoría métrica: herramienta de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_TOOL_SELECTION_ACCURACY -
Ubicación del panel: panel de rendimiento de agentes de IA, precisión en la selección de herramientas de IA
Criterios de evaluación:
Esta métrica utiliza una LLM-based evaluación automática que analiza cada llamada a la herramienta realizada por el agente de IA. Cada llamada a una herramienta se califica como correcta o incorrecta en función de los siguientes criterios:
-
Idoneidad: ¿La herramienta seleccionada era la adecuada para cumplir con la solicitud del cliente?
-
Necesidad: ¿El agente de IA evitó utilizar herramientas innecesarias o incorrectas?
-
Selección óptima: ¿Había disponible una herramienta más adecuada que el agente de IA no tuviera en cuenta?
nota
Esta métrica se actualiza cada 24 horas. Esta métrica está disponible como parte de Connect Customer AI.
Precisión de utilización de las herramientas de IA
Esta métrica mide la tasa de utilización correcta de las herramientas por parte de los agentes de IA, incluidos los parámetros y la selección adecuados. El valor está entre 0 y 1, donde 1 indica un uso perfecto.
-
Tipo de métrica: doble
-
Categoría métrica: herramienta de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AI_TOOL_UTILIZATION_ACCURACY -
Ubicación del panel: panel de rendimiento de los agentes de IA, precisión en el uso de las herramientas de IA
Criterios de evaluación:
Esta métrica es la puntuación combinada de la precisión de la selección de herramientas de IA y la precisión de los parámetros de las herramientas de IA.
nota
Esta métrica se actualiza cada 24 horas. Esta métrica está disponible como parte de Connect Customer AI.
Los turnos de conversación promedio entre los agentes de IA
Esta métrica mide el número medio de turnos de conversación que los agentes de IA tardaron en llegar a un resultado.
-
Tipo de métrica: doble
-
Categoría métrica: agente de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AVG_AI_AGENT_CONVERSATION_TURNS -
Ubicación del panel: panel de rendimiento de AI Agent, promedio. La conversación entre los agentes de IA gira
El promedio de turnos de conversación sobre IA
Esta métrica mide el número medio de turnos de conversación entre todos los contactos relacionados con la IA.
-
Tipo de métrica: doble
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AVG_AI_CONVERSATION_TURNS -
Ubicación del panel: panel de rendimiento de AI Agent, promedio. La conversación de IA gira
Latencia media de invocación rápida de IA
Esta métrica mide la latencia media de invocación de los mensajes de IA en milisegundos.
-
Tipo de métrica: doble
-
Categoría métrica: AI Prompt
-
GetMetricDataV2 Identificador de métrica de la API:
AVG_AI_PROMPT_INVOCATION_LATENCY -
Ubicación del panel: panel de rendimiento de AI Agent, promedio. Latencia de invocación rápida de IA
Latencia media de invocación de herramientas de IA
Esta métrica mide la latencia media de invocación de las herramientas de IA en milisegundos.
-
Tipo de métrica: doble
-
Categoría métrica: herramienta de IA
-
GetMetricDataV2 Identificador de métrica de la API:
AVG_AI_TOOL_INVOCATION_LATENCY -
Ubicación del panel: panel de rendimiento de AI Agent, promedio. Latencia de invocación de herramientas de IA
Puntuación de integridad
Esta métrica mide la proporción de sesiones en las que las respuestas del agente de IA de Orchestration abordan completamente todas las partes de las solicitudes de los clientes, en lugar de proporcionar respuestas parciales o incompletas. El valor está entre 0 y 1, donde 1 indica las respuestas completas en todas las sesiones.
-
Tipo de métrica: doble
-
Categoría métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
COMPLETENESS_SCORE -
Ubicación del panel: panel de rendimiento de AI Agent, promedio. Puntuación de integridad
Criterios de evaluación:
Esta métrica utiliza una LLM-based evaluación automática que analiza cada turno del cliente y la respuesta del agente de IA. Cuando el mensaje de un cliente contiene varias solicitudes o preguntas, la evaluación comprueba si se ha respondido a cada una de ellas. Esta métrica se evalúa mediante los siguientes criterios:
-
Multi-request cobertura: ¿El agente identificó y abordó todas las solicitudes explícitas de un solo turno?
-
Definición de cubierta: ¿Se respondió directamente a cada solicitud, se reconoció con la intención de actuar en consecuencia o se explicó que no era posible por alguna razón policy/constraints?
-
Alcance de la respuesta inmediata: solo se evalúan las respuestas del agente antes del siguiente mensaje; la resolución posterior no cuenta retroactivamente
nota
Esta métrica se actualiza cada 24 horas. Esta métrica está disponible como parte de Connect Customer AI.
Puntuación de fidelidad
Esta métrica mide la proporción de sesiones en las que las respuestas del agente de IA de Orchestration se mantienen fieles al contexto de la conversación, incluidos los mensajes y los resultados de las llamadas a las herramientas. El valor está entre 0 y 1, donde 1 indica una fidelidad contextual perfecta.
-
Tipo de métrica: doble
-
Categoría métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
FAITHFULNESS_SCORE -
Ubicación del panel: panel de rendimiento de AI Agent, promedio. Puntuación de fidelidad
Criterios de evaluación:
Esta métrica utiliza una LLM-based evaluación automática que analiza la respuesta de cada agente de IA en función del contexto de la conversación. Se evalúa la fidelidad de cada respuesta y se comprueba si hay alucinaciones en función de los siguientes criterios:
-
Precisión de la representación: ¿La respuesta representa con precisión la información del contexto de la conversación?
-
Coherencia: ¿La respuesta mantiene la coherencia con los hechos expuestos en la conversación?
-
Inferencias respaldadas: ¿Hay alguna inferencia que la respuesta haga razonablemente respaldada por el contexto?
-
Atribución correcta: ¿La respuesta atribuye correctamente las declaraciones y la información a la fuente correcta de la conversación sin inventar ni desalinear las afirmaciones?
nota
Esta métrica se actualiza cada 24 horas. Esta métrica está disponible como parte de Connect Customer AI.
Tasa de éxito de las metas
Esta métrica mide la proporción de sesiones en las que el agente de IA de Orchestration resolvió correctamente los problemas de los clientes. El valor está entre 0 y 1, donde 1 indica que todas las sesiones se han resuelto correctamente.
-
Tipo de métrica: doble
-
Categoría métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
GOAL_SUCCESS_RATE -
Ubicación del panel: panel de rendimiento de los agentes de IA, tasa de éxito de objetivos
Criterios de evaluación:
Esta métrica utiliza una LLM-based evaluación automática que analiza el seguimiento completo de la conversación de cada sesión de un agente de IA. Cada sesión se califica como exitosa o fallida en función de cuatro dimensiones:
-
Logro de la meta: ¿El agente de IA cumplió el objetivo principal del cliente?
-
Calidad del resultado: ¿El resultado final es preciso y está libre de errores?
-
Exhaustividad: ¿Se abordaron todos los aspectos de la solicitud?
-
Idoneidad: ¿Utilizó el agente de IA las herramientas y los enfoques adecuados?
nota
Esta métrica se actualiza cada 24 horas. Esta métrica está disponible como parte de Connect Customer AI.
Conocimientos, contenido y referencias
Esta métrica mide el recuento de artículos sobre contenido de conocimiento a los que hacen referencia los agentes de IA.
-
Tipo de métrica: entero
-
Categoría métrica: base de conocimientos de IA
-
GetMetricDataV2 Identificador de métrica de la API:
KNOWLEDGE_CONTENT_REFERENCES -
Ubicación del panel: panel de rendimiento de AI Agent, recuento de referencias de la base de conocimientos
Intenciones proactivas respondidas
Esta métrica mide el número de intentos proactivos (consultas de los clientes) que los agentes de IA respondieron correctamente durante las sesiones de IA.
-
Tipo de métrica: entero
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
PROACTIVE_INTENTS_ANSWERED
Intenciones proactivas detectadas
Esta métrica mide el número de intentos proactivos (consultas de los clientes) detectados durante las sesiones de IA, especialmente en los casos de uso de Agent Assistance.
-
Tipo de métrica: entero
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
PROACTIVE_INTENTS_DETECTED
Intenciones proactivas comprometidas
Esta métrica mide el número de intentos proactivos (consultas de los clientes) que utilizaron los agentes humanos durante las sesiones de IA.
-
Tipo de métrica: entero
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
PROACTIVE_INTENTS_ENGAGED
Tasa proactiva de participación intencional
Esta métrica mide el porcentaje de intenciones proactivas detectadas en las que los agentes humanos hicieron clic o en las que interactuaron.
-
Tipo de métrica: porcentaje
-
Categoría de métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
PROACTIVE_INTENT_ENGAGEMENT_RATE -
Ubicación del panel: panel de rendimiento de los agentes de IA, tasa de participación proactiva por intención
Tasa de respuesta intencional proactiva
Esta métrica mide el porcentaje de intenciones proactivas comprometidas que los agentes de IA cumplieron satisfactoriamente.
-
Tipo de métrica: porcentaje
-
Categoría métrica: sesión de IA
-
GetMetricDataV2 Identificador de métrica de la API:
PROACTIVE_INTENT_RESPONSE_RATE
