As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Métricas de agentes de IA
As métricas a seguir estão disponíveis para monitorar o desempenho do agente de IA. Para obter informações sobre a criação de agentes de IA, consulte Criar agentes de IA. Para obter informações sobre como criar solicitações de IA, consulte Criar solicitações de IA. Para obter informações sobre as ferramentas MCP do agente de IA, consulteFerramentas MCP do agente de IA.
Conteúdo
Agentes de IA ativos
Essa métrica mede o número total de agentes de IA exclusivos, em que cada agente de IA é identificado por sua combinação exclusiva de nome e versão.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Agente de IA
-
GetMetricDataV2 Identificador métrico da API:
ACTIVE_AI_AGENTS -
Localização do painel: Painel de desempenho do agente de IA, agentes de IA ativos
Invocações de agentes de IA
Essa métrica mede a contagem total de invocações de Agentes de IA em todos os Agentes de IA por instância.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Agente de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_AGENT_INVOCATIONS -
Localização do painel: Painel de desempenho do agente de IA, contagem de invocações de agentes de IA
Sucesso na invocação de agentes de IA
Essa métrica mede o número de invocações do AI Agent que foram executadas com sucesso sem falhas técnicas, como erros de API, tempos limite ou problemas no sistema.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Agente de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_AGENT_INVOCATION_SUCCESS
Taxa de sucesso de invocação de agentes de IA
Essa métrica mede a porcentagem de invocações do AI Agent que foram executadas com sucesso sem falhas técnicas.
-
Tipo de métrica: porcentagem.
-
Categoria métrica: Agente de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_AGENT_INVOCATION_SUCCESS_RATE -
Localização do painel: Painel de desempenho do agente de IA, taxa de sucesso de invocação do agente de IA
Resposta útil do agente de IA
Essa métrica mede a contagem de sugestões de IA classificadas como úteis com um polegar para cima.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Agente de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_AGENT_RESPONSE_HELPFUL -
Localização do painel: Painel de desempenho do agente de IA, resposta útil do agente de IA
nota
Essa métrica é atualizada a cada 6 horas. Essa métrica está disponível como parte do Connect Customer AI.
A resposta do agente de IA não é útil
Essa métrica mede a contagem de sugestões de IA classificadas como inúteis com o polegar para baixo.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Agente de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_AGENT_RESPONSE_NOT_HELPFUL -
Localização do painel: Painel de desempenho do agente de IA, resposta do agente de IA não útil
nota
Essa métrica é atualizada a cada 6 horas. Essa métrica está disponível como parte do Connect Customer AI.
Transferências de IA
Essa métrica mede a contagem total de contatos gerenciados por agentes de IA que se transformaram em agentes humanos. Essa métrica é especificamente aplicável aos casos de uso de autoatendimento em que os agentes de IA lidam inicialmente com as consultas dos clientes.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_HANDOFFS
Taxa de transferência de IA
Essa métrica mede a porcentagem de contatos tratados por agentes de IA que foram escalados para agentes humanos ou suporte adicional.
-
Tipo de métrica: porcentagem.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_HANDOFF_RATE -
Localização do painel: Painel de desempenho do agente de IA, taxa de transferência
Taxa de conclusão da resposta de IA
Essa métrica mede a porcentagem de sessões de IA que responderam com sucesso às solicitações recebidas dos clientes.
-
Tipo de métrica: porcentagem.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_RESPONSE_COMPLETION_RATE -
Localização do painel: Painel de desempenho do agente de IA, taxa de conclusão de resposta
Contatos envolvidos na IA
Essa métrica mede a contagem total de contatos com clientes nos quais agentes de IA estavam envolvidos, fornecendo automação de autoatendimento ou auxiliando agentes humanos na resolução de consultas de clientes.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_INVOLVED_CONTACTS -
Localização do painel: Painel de desempenho do agente de IA, contatos envolvidos na IA
Sucesso da invocação imediata de IA
Essa métrica mede o número de invocações do AI Prompt que foram executadas com sucesso sem erros.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: AI Prompt
-
GetMetricDataV2 Identificador métrico da API:
AI_PROMPT_INVOCATION_SUCCESS
Taxa de sucesso da invocação do AI Prompt
Essa métrica mede a porcentagem de invocações do AI Prompt que foram executadas com sucesso.
-
Tipo de métrica: porcentagem.
-
Categoria métrica: AI Prompt
-
GetMetricDataV2 Identificador métrico da API:
AI_PROMPT_INVOCATION_SUCCESS_RATE -
Localização do painel: Painel de desempenho do agente de IA, taxa de sucesso de invocação imediata do AI
Invocações de IA Prompt
Essa métrica mede a contagem total de invocações do AI Prompt.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: AI Prompt
-
GetMetricDataV2 Identificador métrico da API:
AI_PROMPT_INVOCATIONS -
Localização do painel: Painel de desempenho do agente de IA, contagem de invocação imediata do AI
Sucesso na invocação de ferramentas de IA
Essa métrica mede o número total de invocações do AI Tool que foram executadas com sucesso.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Ferramenta de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_TOOL_INVOCATION_SUCCESS
Taxa de sucesso de invocação de ferramentas de IA
Essa métrica mede a porcentagem de invocações do AI Tool que foram executadas com sucesso.
-
Tipo de métrica: porcentagem.
-
Categoria métrica: Ferramenta de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_TOOL_INVOCATION_SUCCESS_RATE -
Localização do painel: Painel de desempenho do agente de IA, taxa de sucesso de invocação de ferramentas de IA
Invocações de ferramentas de IA
Essa métrica mede a contagem total de invocações do AI Tool.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Ferramenta de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_TOOL_INVOCATIONS -
Localização do painel: painel de desempenho do agente de IA, contagem de invocações de ferramentas de IA
Precisão dos parâmetros da ferramenta AI
Essa métrica mede a taxa de invocações de ferramentas em que os agentes de IA forneceram os parâmetros corretos. O valor está entre 0-1, onde 1 indica precisão perfeita dos parâmetros.
-
Tipo de métrica: duplo
-
Categoria métrica: Ferramenta de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_TOOL_PARAMETER_ACCURACY -
Localização do painel: Painel de desempenho do agente de IA, precisão dos parâmetros da ferramenta de IA
Critérios de avaliação:
Essa métrica usa uma LLM-based avaliação automatizada que analisa os parâmetros passados para cada chamada de ferramenta em relação ao contexto da conversa e às definições dos parâmetros da ferramenta. Cada chamada de ferramenta é pontuada como correta ou incorreta com base nos seguintes critérios:
-
Presença: todos os parâmetros necessários estão presentes e preenchidos corretamente?
-
Precisão: os valores dos parâmetros são explicitamente justificados pelo contexto da conversa, em vez de inferidos ou assumidos?
-
Precisão: Há algum parâmetro extra, irrelevante ou fabricado incluído?
nota
Essa métrica é atualizada a cada 24 horas. Essa métrica está disponível como parte do Connect Customer AI.
Precisão na seleção de ferramentas de IA
Essa métrica mede a taxa de seleção correta de ferramentas pelos agentes de IA. O valor está entre 0-1, onde 1 indica a seleção ideal.
-
Tipo de métrica: duplo
-
Categoria métrica: Ferramenta de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_TOOL_SELECTION_ACCURACY -
Localização do painel: Painel de desempenho do agente de IA, precisão da seleção de ferramentas de IA
Critérios de avaliação:
Essa métrica usa uma LLM-based avaliação automatizada que analisa cada chamada de ferramenta feita pelo agente de IA. Cada chamada de ferramenta é pontuada como correta ou incorreta com base nos seguintes critérios:
-
Adequação: a ferramenta selecionada foi a correta para atender à solicitação do cliente?
-
Necessidade: o agente de IA evitou chamadas de ferramentas desnecessárias ou incorretas?
-
Seleção ideal: havia uma ferramenta mais apropriada disponível que o agente de IA ignorou?
nota
Essa métrica é atualizada a cada 24 horas. Essa métrica está disponível como parte do Connect Customer AI.
Precisão de utilização da ferramenta de IA
Essa métrica mede a taxa de utilização correta da ferramenta pelos agentes de IA, incluindo parâmetros e seleção adequados. O valor está entre 0-1, onde 1 indica uma utilização perfeita.
-
Tipo de métrica: duplo
-
Categoria métrica: Ferramenta de IA
-
GetMetricDataV2 Identificador métrico da API:
AI_TOOL_UTILIZATION_ACCURACY -
Localização do painel: Painel de desempenho do agente de IA, precisão de utilização da ferramenta de IA
Critérios de avaliação:
Essa métrica é a pontuação combinada da precisão da seleção da ferramenta de IA e da precisão dos parâmetros da ferramenta de IA.
nota
Essa métrica é atualizada a cada 24 horas. Essa métrica está disponível como parte do Connect Customer AI.
Média de turnos de conversa entre agentes de IA
Essa métrica mede o número médio de turnos de conversa que os agentes de IA realizaram para alcançar um resultado.
-
Tipo de métrica: duplo
-
Categoria métrica: Agente de IA
-
GetMetricDataV2 Identificador métrico da API:
AVG_AI_AGENT_CONVERSATION_TURNS -
Localização do painel: Painel de desempenho do agente de IA, Avg. A conversa entre agentes de IA muda
Média de turnos de conversa sobre IA
Essa métrica mede o número médio de conversas em todos os contatos envolvidos na IA.
-
Tipo de métrica: duplo
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
AVG_AI_CONVERSATION_TURNS -
Localização do painel: Painel de desempenho do agente de IA, Avg. Turnos de conversa sobre IA
Latência média de invocação imediata de IA
Essa métrica mede a latência média de invocação dos Prompts de IA em milissegundos.
-
Tipo de métrica: duplo
-
Categoria métrica: AI Prompt
-
GetMetricDataV2 Identificador métrico da API:
AVG_AI_PROMPT_INVOCATION_LATENCY -
Localização do painel: Painel de desempenho do agente de IA, Avg. Latência de invocação imediata de IA
Latência média de invocação da ferramenta de IA
Essa métrica mede a latência média de invocação das ferramentas de IA em milissegundos.
-
Tipo de métrica: duplo
-
Categoria métrica: Ferramenta de IA
-
GetMetricDataV2 Identificador métrico da API:
AVG_AI_TOOL_INVOCATION_LATENCY -
Localização do painel: Painel de desempenho do agente de IA, Avg. Latência de invocação da ferramenta AI
Pontuação de integridade
Essa métrica mede a proporção de sessões em que as respostas do Orchestration AI Agent abordam totalmente todas as partes das solicitações do cliente, em vez de fornecer respostas parciais ou incompletas. O valor está entre 0-1, onde 1 indica respostas completas em todas as sessões.
-
Tipo de métrica: duplo
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
COMPLETENESS_SCORE -
Localização do painel: Painel de desempenho do agente de IA, Avg. Pontuação de integridade
Critérios de avaliação:
Essa métrica usa uma LLM-based avaliação automatizada que analisa cada turno de cliente e a resposta do agente de IA. Quando uma mensagem do cliente contém várias solicitações ou perguntas, a avaliação verifica se cada uma delas foi atendida. Essa métrica é avaliada usando os seguintes critérios:
-
Multi-request cobertura: todas as solicitações explícitas em um único turno foram identificadas e tratadas pelo agente?
-
Definição de abrangida: Cada solicitação foi respondida diretamente, reconhecida com a intenção de agir ou explicada como impossibilitada por causa disso? policy/constraints
-
Escopo de resposta imediata: somente as respostas do agente antes da próxima mensagem são avaliadas; a resolução posterior não conta retroativamente
nota
Essa métrica é atualizada a cada 24 horas. Essa métrica está disponível como parte do Connect Customer AI.
Pontuação de fidelidade
Essa métrica mede a proporção de sessões em que as respostas do Orchestration AI Agent permanecem fiéis ao contexto conversacional, incluindo mensagens e resultados de chamadas de ferramentas. O valor está entre 0-1, onde 1 indica perfeita fidelidade contextual.
-
Tipo de métrica: duplo
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
FAITHFULNESS_SCORE -
Localização do painel: Painel de desempenho do agente de IA, Avg. Pontuação de fidelidade
Critérios de avaliação:
Essa métrica usa uma LLM-based avaliação automatizada que analisa a resposta de cada agente de IA em relação ao contexto da conversa. Cada resposta é avaliada quanto à fidelidade e verificada quanto à alucinação com base nos seguintes critérios:
-
Precisão da representação: a resposta representa com precisão as informações do contexto da conversa?
-
Consistência: a resposta mantém a consistência com os fatos declarados na conversa?
-
Inferências suportadas: Alguma inferência que a resposta faz é razoavelmente apoiada pelo contexto?
-
Atribuição correta: a resposta atribui corretamente declarações e informações à fonte certa na conversa sem fabricar ou desalinhar as afirmações?
nota
Essa métrica é atualizada a cada 24 horas. Essa métrica está disponível como parte do Connect Customer AI.
Taxa de sucesso da meta
Essa métrica mede a proporção de sessões em que o Agente de IA do Orchestration resolveu com sucesso os problemas do cliente. O valor está entre 0-1, onde 1 indica uma resolução bem-sucedida em todas as sessões.
-
Tipo de métrica: duplo
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
GOAL_SUCCESS_RATE -
Localização do painel: painel de desempenho do agente de IA, taxa de sucesso da meta
Critérios de avaliação:
Essa métrica usa uma LLM-based avaliação automatizada que analisa o rastreamento completo da conversa para cada sessão do agente de IA. Cada sessão é pontuada como bem-sucedida ou malsucedida com base em quatro dimensões:
-
Objetivo alcançado: o agente de IA cumpriu o objetivo principal do cliente?
-
Qualidade do resultado: o resultado final é preciso e livre de erros?
-
Integridade: todos os aspectos da solicitação foram atendidos?
-
Adequação: o agente de IA usou ferramentas e abordagens adequadas?
nota
Essa métrica é atualizada a cada 24 horas. Essa métrica está disponível como parte do Connect Customer AI.
Referências de conteúdo de conhecimento
Essa métrica mede a contagem de artigos de conteúdo de conhecimento referenciados por agentes de IA.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Base de conhecimento de IA
-
GetMetricDataV2 Identificador métrico da API:
KNOWLEDGE_CONTENT_REFERENCES -
Localização do painel: painel de desempenho do agente de IA, contagem de referências da base de conhecimento
Intenções proativas respondidas
Essa métrica mede o número de intenções proativas (consultas de clientes) que foram respondidas com sucesso pelos agentes de IA durante as sessões de IA.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
PROACTIVE_INTENTS_ANSWERED
Intenções proativas detectadas
Essa métrica mede o número de intenções proativas (consultas de clientes) detectadas durante as sessões de IA, especialmente para casos de uso da Assistência ao Agente.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
PROACTIVE_INTENTS_DETECTED
Intenções proativas engajadas
Essa métrica mede o número de intenções proativas (consultas de clientes) com as quais agentes humanos interagiram durante as sessões de IA.
-
Tipo de métrica: valor inteiro.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
PROACTIVE_INTENTS_ENGAGED
Taxa de engajamento proativo com intenção
Essa métrica mede a porcentagem de intenções proativas detectadas que foram clicadas ou engajadas por agentes humanos.
-
Tipo de métrica: porcentagem.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
PROACTIVE_INTENT_ENGAGEMENT_RATE -
Localização do painel: painel de desempenho do agente de IA, taxa de engajamento de intenção proativa
Taxa de resposta proativa com intenção
Essa métrica mede a porcentagem de intenções proativas engajadas que foram cumpridas com sucesso pelos agentes de IA.
-
Tipo de métrica: porcentagem.
-
Categoria métrica: Sessão de IA
-
GetMetricDataV2 Identificador métrico da API:
PROACTIVE_INTENT_RESPONSE_RATE
