As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Painel de desempenho do AI Agent
Você pode usar o painel de desempenho do Agente de IA para visualizar o desempenho do Agente de IA e obter informações sobre os agentes de IA e ao longo do tempo.
O painel fornece um único local para visualizar o desempenho agregado do Agente de IA. Use o painel para ver as métricas de seus agentes de IA, como contagem de invocações, latência e taxa de sucesso.
Habilitar o acesso ao painel
Os usuários devem ter as permissões de perfil de segurança apropriadas:
Métricas de acesso - Permissão de acesso ou o Painel - Permissão de acesso. Para obter informações sobre a diferença de comportamento, consulte Atribuir permissões para visualizar painéis e relatórios no Amazon Connect.
Aplicativos do agente — permissão Connect Workspace AI Chat Widget: essa permissão é necessária para acessar o painel AI Agent Performance.
O painel está disponível em: Análise e otimização > Painéis de análise > Desempenho do agente de IA.
Especificar o “intervalo de tempo” e o ponto de referência “Comparar com”
Use o filtro de intervalo de tempo para especificar a data e o período em que você deseja visualizar os dados no painel.
Por padrão, o painel exibe os dados da última semana. Você pode personalizar o intervalo de tempo para visualizar dados tão recentes quanto os últimos 15 minutos ou que remontam a até 3 meses no histórico.
Use o filtro Comparar para selecionar um período de tempo com o qual comparar seus dados atuais. Isso permite que você identifique tendências e acompanhe melhorias ou problemas ao longo do tempo.
Resumo do desempenho da IA de autoatendimento
Esta seção mostra a integridade das interações de autoatendimento iniciadas pelo agente de IA. Ele exibe as seguintes métricas principais para o período selecionado, filtradas pelo caso de uso de “autoatendimento”:
-
A IA envolveu contatos:
Contagem total de contatos atendidos quando agentes de IA resolveram consultas de clientes sem envolver agentes humanos.
-
Agentes ativos de IA:
O número total de agentes de IA exclusivos, em que cada agente é identificado por sua combinação exclusiva de nome e versão.
-
Taxa de conclusão da resposta:
A porcentagem de sessões de agentes de IA que tiveram sucesso em responder às solicitações recebidas.
-
Taxa de transferência:
Porcentagem de contatos de autoatendimento atendidos por agentes de IA que foram marcados por precisarem de suporte adicional, incluindo, mas não se limitando a, agentes humanos.
-
Avg. A conversa sobre IA gira:
Número médio de giros de conversa entre contatos habilitados para IA.
A imagem a seguir mostra um exemplo de gráfico resumido do desempenho da IA de autoatendimento.
Resumo do desempenho da assistência de agentes de IA
Esse widget mostra a integridade de suas interações assistidas por agentes, nas quais a IA fornece suporte a agentes humanos. Ele exibe as seguintes métricas principais para o período selecionado, filtradas pelo caso de uso da “Assistência do agente”.
-
A IA envolveu contatos:
Número total de contatos em que agentes de IA ajudaram agentes humanos a resolver dúvidas de clientes.
-
Agentes ativos de IA:
O número total de agentes de IA exclusivos, em que cada agente é identificado por sua combinação exclusiva de nome e versão.
-
Taxa de conclusão da resposta:
A porcentagem de sessões de agentes de IA que tiveram sucesso em responder às solicitações recebidas.
-
Taxa de engajamento proativo com intenção:
Porcentagem de intenções proativas detectadas clicadas por agentes humanos.
-
Avg. A conversa sobre IA gira:
Número médio de giros de conversa entre contatos habilitados para IA.
-
Tempo médio de atendimento:
Tempo médio de atendimento dos contatos em que os agentes de IA estavam envolvidos
A imagem a seguir mostra um exemplo de gráfico resumido do desempenho da assistência de agentes de IA.
Agentes de IA por gráfico de versão
No grafo Tendência da pontuação de avaliação, você pode visualizar tendências em intervalos de 15 minutos, diariamente, semanalmente ou mensalmente, e realizar uma comparação com referências de períodos anteriores e de recursos. Os intervalos disponíveis dependem das seleções do intervalo de tempo. Por exemplo, para um intervalo de tempo semanal, você pode visualizar tendências em intervalos diários e semanais.
Além dos filtros de página, você também pode adicionar filtros ao grafo para o formulário e a fonte de avaliação.
A imagem a seguir mostra um exemplo de grafo Tendência da pontuação de avaliação.
Agentes de IA por taxa de sucesso de invocação
O gráfico de taxa de sucesso de agentes de IA por invocação exibe a taxa de sucesso de invocação para cada agente de IA. Você pode configurar ainda mais esse widget filtrando por agentes de IA específicos, tipo de agente de IA, caso de uso de IA ou outras dimensões diretamente desse gráfico.
A imagem a seguir mostra um exemplo de gráfico de taxa de sucesso de agentes de IA por invocação.
Solicitações de IA por versão
Esta tabela fornece uma visão detalhada do desempenho do prompt de IA. Você pode expandir as linhas do tipo de agente de IA e do tipo de prompt para detalhar as versões específicas do prompt. Para ver como cada versão contribui para o desempenho geral do tipo de prompt, veja as métricas individuais de cada linha de versão do prompt.
A tabela exibe métricas de desempenho em três níveis:
-
Nível do tipo de agente de IA:
Métricas agregadas em todos os prompts e versões de um tipo de agente de IA
-
Nível do tipo de prompt de IA:
Métricas agregadas em todas as versões de um tipo específico de prompt de IA
-
Nível de versão do prompt de IA:
Métricas de desempenho individuais para cada versão do prompt de IA
Métricas exibidas:
-
Contagem de invocações imediatas do AI:
Número total de vezes que a versão do prompt de IA foi invocada
-
Taxa de sucesso de invocação imediata de IA:
Porcentagem de invocações de prompt de IA que foram executadas com sucesso
-
Avg. Latência de invocação imediata da IA:
Latência média de invocação em milissegundos para a versão do prompt de IA
Além de usar os filtros de página, você pode adicionar filtros à tabela para agentes de IA específicos, solicitações de IA, intervalos de tempo ou outras dimensões.
A imagem a seguir mostra um exemplo de gráfico de solicitações de IA por versão.
