Resultados e saída
Os resultados da avaliação on-line são salvos automaticamente na Amazon CloudWatch. Quando você cria uma configuração de avaliação on-line, o serviço cria um grupo de CloudWatch registros dedicado para armazenar os resultados da avaliação no formato JSON.
Tópicos
Estrutura do grupo de registros
Os resultados da avaliação são armazenados em um grupo de CloudWatch registros com o formato/aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id>. O grupo de registros pode ser visualizado na página de detalhes da configuração de avaliação no AgentCore console Amazon Bedrock.
Cada avaliação gera uma entrada de registro separada dentro desse grupo de registros. Além disso, as pontuações das avaliações são emitidas como CloudWatch métricas para monitoramento e análise.
Formato do resultado
Os resultados das avaliações seguem as convenções OpenTelemetry semânticas para eventos de resultados de avaliação do GenAI. Os eventos são vinculados à ID de extensão original, quando possível, e contêm referências à ID de rastreamento e à ID de sessão originais.
Você pode usar o CloudWatch Logs Insights para consultar e analisar os resultados da avaliação e o CloudWatch Metrics para monitorar as tendências da avaliação ao longo do tempo.
Visualizando resultados no CloudWatch Observability Console
Você pode visualizar e analisar os resultados da avaliação usando o CloudWatch Observability Console. O console fornece visualizações, métricas e registros detalhados das avaliações de seus agentes.
Para ver os resultados da avaliação
-
Abra o CloudWatch console em https://console.aws.amazon.com/cloudwatch/
-
No painel de navegação, escolha GenAI Observability > Bedrock AgentCore
-
Na seção Agentes, selecione o agente e o endpoint associados à sua configuração de avaliação
-
Navegue até a guia Avaliações para obter resultados detalhados
Para obter mais detalhes, consulte a documentação de avaliações de rastreamento de AWS CloudWatch sessão.
Visualizando pontuações de avaliação em CloudWatch Métricas
As pontuações das avaliações são publicadas como CloudWatch métricas. Você pode visualizá-los diretamente no console do CloudWatch Metrics.
Para ver as pontuações da avaliação
-
Abra o CloudWatch console em https://console.aws.amazon.com/cloudwatch/
-
No painel de navegação, escolha Métricas > Todas as métricas
-
Na guia Procurar, selecione Bedrock-AgentCore/Evaluations
-
Selecione combinações de dimensões para, opcionalmente, restringir os resultados por tipo de avaliador ou rótulo de avaliação
Para obter mais detalhes, consulte a documentação de avaliações de rastreamento de AWS CloudWatch sessão.
