결과 및 출력
온라인 평가 결과는 Amazon CloudWatch에 자동으로 저장됩니다. 온라인 평가 구성을 생성하면 서비스는 평가 결과를 JSON 형식으로 저장하는 전용 CloudWatch 로그 그룹을 생성합니다.
로그 그룹 구조
평가 결과는 형식으로 CloudWatch 로그 그룹에 저장됩니다/aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id>. 로그 그룹은 Amazon Bedrock AgentCore 콘솔의 평가 구성 세부 정보 페이지에서 볼 수 있습니다.
각 평가는이 로그 그룹 내에 별도의 로그 항목을 생성합니다. 또한 평가 점수는 모니터링 및 분석을 위한 CloudWatch 지표로 내보내집니다.
결과 형식
평가 결과는 GenAI 평가 결과 이벤트에 대한 OpenTelemetry 의미 체계 규칙을 따릅니다. 이벤트는 가능한 경우 원래 범위 ID로 상위 처리되며 원래 추적 ID 및 세션 ID를 참조합니다.
CloudWatch Logs Insights를 사용하여 평가 결과를 쿼리 및 분석하고 CloudWatch 지표를 사용하여 시간 경과에 따른 평가 추세를 모니터링할 수 있습니다.
CloudWatch Observability Console에서 결과 보기
CloudWatch Observability Console을 사용하여 평가 결과를 보고 분석할 수 있습니다. 콘솔은 에이전트 평가에 대한 시각화, 지표 및 세부 로그를 제공합니다.
평가 결과를 보려면
-
https://console.aws.amazon.com/cloudwatch/
에서 CloudWatch 콘솔을 엽니다. -
탐색 창에서 GenAI Observability > Bedrock AgentCore를 선택합니다.
-
에이전트 섹션에서 평가 구성과 연결된 에이전트 및 엔드포인트를 선택합니다.
-
자세한 결과를 보려면 평가 탭으로 이동합니다.
자세한 내용은 AWS CloudWatch 세션 추적 평가 설명서를 참조하세요.
CloudWatch 지표에서 평가 점수 보기
평가 점수는 CloudWatch 지표로 게시됩니다. CloudWatch Metrics 콘솔에서 직접 볼 수 있습니다.
평가 점수를 보려면
-
https://console.aws.amazon.com/cloudwatch/
에서 CloudWatch 콘솔을 엽니다. -
탐색 창에서 지표 > 모든 지표를 선택합니다.
-
찾아보기 탭에서 Bedrock-AgentCore/Evaluations를 선택합니다.
-
차원 조합을 선택하여 선택적으로 평가자 유형 또는 평가 레이블별로 결과 범위를 좁힙니다.
자세한 내용은 AWS CloudWatch 세션 추적 평가 설명서를 참조하세요.