As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Criar sua primeira avaliação de modelo que utiliza trabalhadores humanos
Um trabalho de avaliação de modelo que utiliza trabalhadores humanos requer acesso aos recursos de nível de serviço a seguir. Use os tópicos com link para saber mais sobre como configurar.
Recursos de nível de serviço necessários para iniciar um trabalho de avaliação de modelo que utiliza trabalhadores humanos
-
O trabalho de avaliação de modelos que usa trabalhadores humanos permite que você obtenha rate/compare as respostas de até dois modelos básicos diferentes. Para iniciar um trabalho, é necessário pelo menos um modelo de base do Amazon Bedrock. Para saber mais sobre como acessar os modelos de base do Amazon Bedrock, consulte Acessar modelos de base do Amazon Bedrock.
-
Para criar um trabalho de avaliação de modelo usando trabalhadores humanos, você precisa acessar o https://console.aws.amazon.com/bedrock/
AWS Command Line Interface, ou um AWS SDK compatível. Para saber mais sobre os recursos e ações necessários do IAM, consulte Permissões do console necessárias para criar um trabalho de avaliação de modelo realizado por humanos. -
Quando o trabalho de avaliação de modelo é iniciado, é usado um perfil de serviço para executar ações em seu nome. Para saber mais sobre as ações necessárias do IAM e os requisitos de política de confiança, consulte Requisitos do perfil de serviço para trabalhos automáticos de avaliação de modelo.
-
É necessário um conjunto de dados de prompts para iniciar o trabalho de avaliação de modelo, que deve ser armazenado em um bucket do Amazon S3. Para saber mais sobre os requisitos de um conjunto de dados de prompts, consulte Criar um conjunto de dados de prompts personalizado em trabalhos de avaliação de modelo que utilizam trabalhadores humanos.
-
Os avaliadores humanos são gerenciados como uma equipe de trabalho. É possível criar uma equipe de trabalho gerenciada pelo Amazon Cognito usando o console do Amazon Bedrock. Para saber mais sobre como gerenciar sua força de trabalho, consulte Gerenciar uma equipe de trabalho de avaliações humanas de modelos no Amazon Bedrock.
Permissões do console necessárias para criar um trabalho de avaliação de modelo realizado por humanos
Para criar um trabalho de avaliação de modelo que utiliza trabalhadores humanos usando o console do Amazon Bedrock, é necessário adicionar outras permissões ao seu usuário, grupo ou perfil.
A política a seguir contém o conjunto mínimo de ações e recursos do IAM no Amazon Bedrock, Amazon SageMaker AI, Amazon Cognito e Amazon S3 que são necessários para criar um trabalho de avaliação de modelo baseado em humanos usando o console Amazon Bedrock.