기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

# Amazon Bedrock에서 모델의 인적 평가를 위한 작업팀 관리
<a name="human-worker-evaluations"></a>

작업자가 필요한 모델 평가 작업에서는 작업팀을 구성해야 합니다. 작업팀은 *사용자*가 선택하는 작업자 그룹입니다. 이들은 회사 직원이거나 업계의 분야별 전문가 그룹일 수 있습니다.

**Amazon Bedrock의 작업자 알림**  
Amazon Bedrock에서 평가 작업을 만드는 경우 작업자는 작업팀에 처음 추가된 경우에*만* 배정된 작업에 대한 알림을 받을 수 있습니다.
평가 작업을 만드는 과정에서 작업자를 작업팀에서 삭제하면 해당 작업자는 배정된 *모든* 평가 작업에 대한 액세스 권한도 잃게 됩니다.
기존 작업자에게 새 평가 작업을 할당하는 경우 해당 작업자에게 이 사실을 직접 알리고 작업자 포털의 URL을 제공해야 합니다. 작업자는 이전에 생성한 로그인 자격 증명을 작업자 포털에 사용해야 합니다. 이 작업자 포털은 리전별로 AWS 계정의 모든 평가 작업에 대해 동일합니다.

Amazon SageMaker Ground Truth에서 관리하는 *프라이빗 작업 인력*으로 평가 작업 인력을 설정하는 과정에서 인적 작업팀을 만들거나 기존 작업팀을 관리할 수 있습니다. Amazon SageMaker Ground Truth는 고급 작업 인력 관리 기능을 지원합니다. Amazon SageMaker Ground Truth의 작업 인력 관리에 대한 자세한 내용은 [작업 인력 생성 및 관리](https://docs.aws.amazon.com/sagemaker/latest/dg/sms-workforce-management.html)를 참조하세요.

새 평가 작업을 설정하는 과정에서 작업자를 작업팀에서 삭제할 수 있습니다. 그렇지 않으면 Amazon Cognito 콘솔 또는 Amazon SageMaker Ground Truth 콘솔 중 하나를 사용하여 Amazon Bedrock에서 생성한 작업 팀을 관리해야 합니다.

IAM 사용자, 그룹 또는 역할에 필요한 권한이 있는 경우, 작업 인력이 참여하는 평가 작업을 만들 때 Amazon Cognito, Amazon SageMaker Ground Truth 또는 Amazon Augmented AI에서 만든 기존 프라이빗 작업 인력 및 작업팀이 표시됩니다.

Amazon Bedrock은 작업 팀당 최대 50명의 작업자를 지원합니다.

이메일 주소 필드에 최대 50명의 이메일 주소를 한번에 입력합니다. 평가 작업에 작업자를 더 추가하려면 Amazon Cognito 콘솔 또는 Ground Truth 콘솔을 사용합니다. 주소는 쉼표로 구분해야 합니다. 자신의 이메일 주소를 포함해야 합니다. 그래야 작업 인력의 일원이 되어 라벨링 작업을 볼 수 있습니다.

## 사람 작업자를 위한 지침 생성
<a name="human-worker-evaluation-instructions"></a>

모델 평가 작업에 대해 유용한 지침을 생성하면 작업자의 작업 완료 정확도가 향상됩니다. 모델 평가 작업을 생성할 때 콘솔에 제공되는 기본 지침을 수정할 수 있습니다. 이러한 지침은 레이블 지정 작업을 완료하는 UI 페이지의 작업자에게 표시됩니다.

작업자가 배정된 작업을 완료할 수 있도록 두 곳에 지침을 제공할 수 있습니다.

**각 평가 및 등급 지정 방법에 대한 적절한 설명을 입력합니다.**  
설명에는 선택한 지표에 대한 간결한 설명이 포함되어야 합니다. 설명은 지표를 확장하고 작업자가 선택한 등급 지정 방법을 어떻게 평가하기를 원하는지 명확하게 설명해야 합니다.

**작업자의 전반적인 평가 지침 제공**  
이러한 지침은 작업자가 작업을 완료하는 동일한 웹 페이지에 표시됩니다. 이 공간을 사용하여 모델 평가 작업에 대한 고수준의 방향을 제시하고 실제 데이터 기반 응답을 프롬프트 데이터세트에 포함시킨 경우 이를 설명할 수 있습니다.