As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
# Entenda os resultados de um trabalho de avaliação automática
Quando seu trabalho de avaliação automática de modelo é concluído, os resultados são salvos no Amazon S3. As seções abaixo descrevem os arquivos gerados e como interpretá-los.
## Como interpretar a estrutura do arquivo `output.json`
O arquivo `output.json` contém pontuações agregadas para os conjuntos de dados e métricas selecionados.
Veja a seguir um exemplo de saída:
```
{
"evaluations": [{
"evaluation_name": "factual_knowledge",
"dataset_name": "trex",
## The structure of the prompt template changes based on the foundation model selected
"prompt_template": "[INST] <>Answer the question at the end in as few words as possible. Do not repeat the question. Do not answer in complete sentences.< Question: $feature [/INST]",
"dataset_scores": [{
"name": "factual_knowledge",
"value": 0.2966666666666667
}],
"category_scores": [{
"name": "Author",
"scores": [{
"name": "factual_knowledge",
"value": 0.4117647058823529
}]
},
....
{
"name": "Capitals",
"scores": [{
"name": "factual_knowledge",
"value": 0.2857142857142857
}]
}
]
}]
}
```
## Como interpretar a estrutura do arquivo de resultados em termos de instância
Um arquivo {{evaluation\_name}} \_ {{dataset\_name}} .jsonl contendo resultados em termos de instância para cada solicitação jsonlines. Se você tinha `300` solicitações em seus dados de entrada jsonlines, o arquivo de saída jsonlines contém `300` respostas. O arquivo de saída contém a solicitação feita ao seu modelo seguida pela pontuação dessa avaliação. Veja a seguir um exemplo de saída de instância.
## Como interpretar o relatório
Um **relatório de avaliação** contém os resultados do seu trabalho de avaliação do modelo básico. O conteúdo do relatório de avaliação depende do tipo de tarefa que você usou para avaliar seu modelo. Cada relatório contém as seguintes seções:
1. As **pontuações gerais** de cada avaliação bem-sucedida na tarefa de avaliação. Como exemplo de uma avaliação com um conjunto de dados, se você avaliou seu modelo para uma tarefa de classificação de precisão e robustez semântica, uma tabela resumindo os resultados da avaliação de precisão e robustez semântica aparece na parte superior do seu relatório. Outras avaliações com outros conjuntos de dados podem ser estruturadas de forma diferente.
1. A configuração do seu trabalho de avaliação, incluindo o nome e o tipo do modelo, quais métodos de avaliação foram usados e com quais conjuntos de dados seu modelo foi avaliado.
1. A seção **Resultados detalhados da avaliação**, que resume o algoritmo de avaliação, fornece informações e links para os conjuntos de dados integrados, como as pontuações são calculadas e tabelas mostrando alguns dados de amostra com suas pontuações associadas.
1. A seção **Avaliações com falhas** contém uma lista de avaliações que não foram concluídas. Se nenhuma avaliação falhar, essa seção do relatório será omitida.