在 Amazon Bedrock 中使用重排器模型 - Amazon Bedrock

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

在 Amazon Bedrock 中使用重排器模型

您可以直接使用重排器模型,也可以在知识库查询期间检索结果时使用该模型。选择与您的首选方法对应的选项卡,然后按照以下步骤操作:

Console

您不能直接在 AWS 管理控制台中使用重排器模型,但您可以在查询知识库时,通过执行以下操作使用重排模型:

  1. 在查询知识库时,请选择 Three horizontal sliders with adjustable circular controls for settings or parameters. 图标打开配置窗格。

  2. 展开重排部分。

  3. 选择选择模型并选择一个重排器模型。

  4. 如果 Amazon Bedrock 知识库服务角色缺少使用重排器模型的权限,请选择更新服务角色以使用合适的权限修改该角色。

  5. (可选)在其他重排选项部分,根据需要修改所有选项。

  6. 输入新提示并选择运行。响应是应用重排器模型后的结果。

有关执行知识库查询的更多详细说明,请参阅查询知识库并检索数据根据检索到的数据查询知识库并生成响应

API

有关在知识库查询期间使用重排器模型的说明,请参阅查询知识库并检索数据根据检索到的数据查询知识库并生成响应

要直接将重排器模型与 Amazon Bedrock API 结合使用,请使用 Amazon Bedrock 代理运行时端点发送重排请求。

以下字段是必填字段:

字段 Basic description
查询 包含一个 RerankQuery 对象的数组。请将 TEXT 指定为 type,并在 textQuery 字段中提供查询。
来源 RerankSource 对象的数组,用于提交到重排模型。对于每个 RerankSource,请将 INLINE 指定为 type,并在 inlineDocumentSource 字段中添加一个 RerankDocument 对象。有关 RerankDocument 的详细信息,请参阅下文。
rerankingConfiguration 添加要使用的重排模型的 Amazon 资源名称(ARN)、重排后要返回的结果数量以及模型的推理配置(可选)。您需要以键值对的格式指定额外的模型配置。有关更多信息,请参阅 Cohere 文档网站上的重排

以下字段是可选字段:

字段 应用场景
nextToken 上一个响应中返回的一个词元,您可以添加该词元以提供下一批结果。

添加的 RerankSource 对象的格式取决于文档的格式。要查看其他 RerankSource 类型的格式,请选择与文档的格式对应的选项卡:

StringJSON object
String

如果文档是字符串,则将 RerankDocument 对象的 type 字段的值指定为 TEXT,并在 text 字段中添加该文档。例如:

{ "inlineDocumentSource": { "textDocument": { "text": "string" }, "type": "TEXT" }, "type": "INLINE" }
JSON object

如果文档是 JSON 对象,则将 RerankDocument 对象中的 type 字段的值指定为 JSON,并在 jsonDocument 字段中添加该文档。例如:

{ "inlineDocumentSource": { "jsonDocument": JSON value, "type": "JSON" }, "type": "INLINE" }

对您的 Rerank 请求的响应将在 results 字段中返回 RerankResult 对象的列表。每个对象都包含以下字段:

  • document:包含您提交的文档的相关信息。

  • relevanceScore:文档的相关性分数,由重排模型分配。

  • index:表示文档相对于列表中其他文档的排名。分数越低,排序位置越靠前。

如果要显示的结果过多,则响应会在 nextToken 字段中返回一个值。在这种情况下,为了查看下一批结果,请在后续请求中添加该词元。