在 Amazon Bedrock 中创建用于 RAG 评测的提示数据集 - Amazon Bedrock

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

在 Amazon Bedrock 中创建用于 RAG 评测的提示数据集

要评测 Amazon Bedrock 知识库或您自己的检索增强生成(RAG)系统的检索和生成,您需要提供一个提示数据集。当您提供自己的 RAG 系统中的响应数据时,Amazon Bedrock 会跳过知识库调用步骤,直接根据您的数据执行评测作业。

提示数据集必须存储在 Amazon S3 中,并使用 JSON 行格式和 .jsonl 文件扩展名。每行必须是有效的 JSON 对象。每个评测作业的数据集内最多可以有 1000 条提示。对于 retrieve-and-generate评估作业,每次对话的最大回合数为 5。对于仅限检索评测,只能指定一个回合。

对于使用控制台创建的作业,您必须更新 S3 存储桶上的跨源资源共享(CORS)配置。要了解有关所需 CORS 权限的更多信息,请参阅 必需的 S3 存储桶的跨源资源共享(CORS)权限

请参阅以下主题,详细了解根据所选评测作业的类型而需提供的键值对。