翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

# 自動モデル評価
<a name="clarify-foundation-model-evaluate-auto"></a>

Studio で自動モデル評価を作成するか、独自のコード内で `fmeval` ライブラリを使用して自動モデル評価を作成できます。Studio ではウィザードを使用してモデル評価ジョブを作成します。`fmeval` ライブラリは、ワークフローをさらにカスタマイズするためのツールを提供しています。

いずれのタイプの自動モデル評価ジョブも、公開されている JumpStart モデルと、既にエンドポイントにデプロイした JumpStart モデルの使用をサポートしています。デプロイ済み*でない* JumpStart を使用する場合、SageMaker AI は必要なリソースの作成し、モデル評価ジョブ完了後はシャットダウンを処理します。

の外部でホストされている他の AWS サービスまたはモデルからテキストベースの LLMs を使用するには AWS、 `fmeval`ライブラリを使用する必要があります。

ジョブが完了すると、ジョブの作成時に指定した Amazon S3 バケットに結果が保存されます。結果を解釈する方法については、「[モデル評価ジョブの結果を理解する](clarify-foundation-model-evaluate-results.md)」を参照してください。

**Topics**
+ [Studio で自動モデル評価ジョブを作成する](clarify-foundation-model-evaluate-auto-ui.md)
+ [`fmeval` ライブラリを使用して自動評価を実行する](clarify-foundation-model-evaluate-auto-lib.md)
+ [モデル評価の結果](clarify-foundation-model-reports.md)