本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
Amazon RDS/Aurora
您可以使用数据库数据来源为存储在数据库中的文档编制索引。提供数据库的连接信息后,Amazon Kendra连接和索引文档。
Amazon Kendra支持以下数据库:
-
Amazon Aurora MySQL
-
Amazon Aurora PostgreSQL
-
Amazon RDS适用于 MySQL
-
Amazon RDS适用于 PostgreSQL
这款 Amazon RDS/Aurora 连接器计划于 2023 年底之前弃用。
Amazon Kendra现在支持新的数据库数据源连接器。为了改善体验,我们建议您选择以下适用于您的用例的新连接器:
您可以使用Amazon Kendra控制台和 DatabaseConfigurationAPI Amazon Kendra 连接到数据库数据源。
要对Amazon Kendra数据库数据源连接器进行故障排除,请参阅数据来源故障排除。
支持的功能
Amazon Kendra数据库数据源连接器支持以下功能:
先决条件
在使用Amazon Kendra索引数据库数据源之前,请先在数据库和AWS帐户中进行这些更改。
在数据库中,请确保:
-
记下您的数据库用户名和密码基本身份验证凭证。
-
已复制主机名、端口号、主机地址、数据库名称以及包含文档数据的数据表的名称。对于 PostgreSQL,数据表必须是公共表或公共架构。
主机和端口告诉您在 Internet 上的Amazon Kendra何处可以找到数据库服务器。数据库名和表名告诉你Amazon Kendra在数据库服务器上哪里可以找到文档数据。
-
已复制数据表中包含文档数据的列的名称。必须包括文档 ID、文档正文、用于检测文档是否已更改的列(例如,上次更新的列)以及映射到自定义索引字段的可选数据表列。您也可以将任何 Amazon Kendra 保留字段名称映射到表列。
-
已复制数据库引擎类型信息,例如您使用的是 My Amazon RDS SQL 还是其他类型。
-
在数据库以及计划用于编制同一索引的其他数据来源中,已检查每个文档都是唯一的。您要用于编制索引的每个数据来源在所有数据来源中都不能包含相同的文档。文档对索引来说 IDs 是全局的,并且每个索引必须是唯一的。
在你的AWS 账户,请确保你有:
-
已创建Amazon Kendra索引,如果使用 API,则记下索引 ID。
-
为您的数据源@@ 创建了一个IAM角色,如果使用 API,请记下该角色的 ARN。IAM
如果您更改了身份验证类型和证书,则必须更新您的IAM角色才能访问正确的AWS Secrets Manager密钥 ID。
-
将您的数据库身份验证凭证存储在 AWS Secrets Manager 密钥中,如果使用 API,请记下密钥的 ARN。
我们建议您定期刷新或轮换您的凭证和密码。为了安全起见,请仅提供必要的访问权限级别。我们建议不要跨数据来源以及连接器版本 1.0 和 2.0(如果适用)重复使用凭证和密钥。
如果您没有现有的IAM角色或密钥,则可以在将数据库数据源连接到时使用控制台创建新的IAM角色和Secrets Manager密钥Amazon Kendra。如果您使用的是 API,则必须提供现有IAM角色和Secrets Manager密钥的 ARN 以及索引 ID。
连接说明
要Amazon Kendra连接到数据库数据源,必须提供数据库数据源的必要详细信息,Amazon Kendra以便访问您的数据。如果您尚未为配置数据库Amazon Kendra,请参见先决条件。
- Console
-
Amazon Kendra连接到数据库
-
登录AWS 管理控制台并打开Amazon Kendra控制台。
-
在左侧导航窗格中,选择索引,然后从索引列表中选择要使用的索引。
您可以选择在索引设置下配置或编辑您的用户访问控制设置。
-
在开始使用页面上,选择添加数据来源。
-
在添加数据来源页面上,选择数据库连接器,然后选择添加连接器。如果使用版本 2(如果适用),请选择带有“V2.0”标签的数据库连接器。
-
在指定数据来源详细信息页面上,输入以下信息:
-
在名称和描述中,在数据来源名称中输入您的数据来源的名称。可以包含连字符,但不能包含空格。
-
(可选)描述:输入数据来源的描述信息。
-
在默认语言中,选择用于筛选文档以编制索引的语言。除非另行指定,否则语言默认为英语。在文档元数据中指定的语言会覆盖所选语言。
-
在标签中,用于添加新标签-包括可选标签以搜索和筛选您的资源或跟踪您的AWS成本。
-
选择下一步。
-
在定义访问权限和安全性页面上,请输入以下信息:
-
终端节点-DNS 主机名、 IPv4 地址或 IPv6 地址。
-
端口 - 端口号。
-
数据库 - 数据库名称。
-
表名 - 表名。
-
对于身份验证类型,请选择现有或新建,以便存储您的数据库身份验证凭证。如果您选择创建新密钥,则会打开 AWS Secrets Manager 密钥窗口。
-
在创建 AWS Secrets Manager 密钥窗口中输入以下信息:
-
密钥名称 - 密钥的名称。前缀 “AmazonKendra-database-” 会自动添加到您的密钥名称中。
-
对于用户名和密码 - 输入您从数据库账户中复制的身份验证凭证值。
-
选择保存身份验证。
-
虚拟私有云(VPC)- 您可以选择使用 VPC。如果是这样,则必须添加子网和 VPC 安全组。
您必须使用私有子网。如果您的 RDS 实例位于您的 VPC 的公有子网中,则可以创建一个私有子网,该子网可以出站访问公有子网中的 NAT 网关。VPC 配置中提供的子网必须位于美国西部(俄勒冈州)、美国东部(弗吉尼亚北部)和欧洲(爱尔兰)。
-
IAMro le —选择现有IAM角色或创建新IAM角色来访问您的存储库凭据和索引内容。
IAM用于索引的角色不能用于数据源。如果您不确定是否将现有角色用于编制索引或常见问题解答,为了避免出错,请选择创建新角色。
-
选择下一步。
-
在配置同步设置页面上,请输入以下信息:
-
根据您的使用案例,选择 Aurora MySQL、MySQL、Aurora PostgreSQL 和 PostgreSQL。
-
用双引号将 SQL 标识符括起来 - 选择使用双引号将 SQL 标识符括起来。例如,“columnName”。
-
ACL 列和变更检测列-配置Amazon Kendra用于变更检测的列(例如,上次更新的列)和您的访问控制列表。
-
在 “同步运行计划” 中,“频率”-选择与数据源同步的频率。Amazon Kendra
-
选择下一步。
-
在设置字段映射页面上,请输入以下信息:
-
Amazon Kendra默认字段映射-从Amazon Kendra生成的默认数据源字段中选择要映射到索引的字段。必须为 document_id 和 document_body 添加数据库列值
-
自定义字段映射 - 要添加自定义数据来源字段以创建要映射到的索引字段名称和字段数据类型。
-
选择下一步。
-
在查看和创建页面上,请检查输入的信息是否正确,然后选择添加数据来源。您也可以选择在此页面上编辑信息。成功添加数据来源后,您的数据来源将显示在数据来源页面上。
- API
-
Amazon Kendra连接到数据库
您必须指定以下 DatabaseConfigurationAPI:
-
ColumnConfiguration— 有关索引应从数据库中从何处获取文档信息的信息。有关更多详细信息,请参阅 ColumnConfiguration。必须指定 DocumentDataColumnName(文档正文或朱文本)、DocumentIdColumnName 和 ChangeDetectingColumn(例如,上次更新的列)字段。映射到 DocumentIdColumnName 字段的列必须是整数列。以下示例显示数据库数据来源的简单列配置:
"ColumnConfiguration": {
"ChangeDetectingColumns": [
"LastUpdateDate",
"LastUpdateTime"
],
"DocumentDataColumnName": "TextColumn",
"DocumentIdColumnName": "IdentifierColumn",
"DocoumentTitleColumnName": "TitleColumn",
"FieldMappings": [
{
"DataSourceFieldName": "AbstractColumn",
"IndexFieldName": "Abstract"
}
]
}
-
ConnectionConfiguration— 连接数据库所需的配置信息。有关更多详细信息,请参阅 ConnectionConfiguration。
-
DatabaseEngineType— 运行数据库的数据库引擎的类型。的DatabaseHost字段ConnectionConfiguration必须是数据库的 Amazon Relational Database Service (Amazon RDS) 实例终端节点。不要使用集群端点。
-
亚马逊秘密资源名称 (ARN)-提供包含数据库账户身份验证凭证的Secrets Manager密钥的亚马逊资源名称 (ARN)。密钥必须使用具有以下键的 JSON 结构存储:
{
"username": "user name",
"password": "password"
}
以下示例显示数据库配置,包括密钥 ARN。
"DatabaseConfiguration": {
"ConnectionConfiguration": {
"DatabaseHost": "host.subdomain.domain.tld",
"DatabaseName": "DocumentDatabase",
"DatabasePort": 3306,
"SecretArn": "arn:aws:secretmanager:region:account ID:secret/secret name",
"TableName": "DocumentTable"
}
}
我们建议您定期刷新或轮换您的凭证和密码。为了安全起见,请仅提供必要的访问权限级别。我们建议不要跨数据来源以及连接器版本 1.0 和 2.0(如果适用)重复使用凭证和密钥。
-
IAMro le —指定RoleArn何时调用CreateDataSource以向IAM角色提供访问您的Secrets Manager密钥的权限以及调用数据库连接器 APIs 所需的公众的权限,以及Amazon Kendra。有关更多信息,请参阅数据库数据来源的 IAM 角色。
您还可以添加以下可选功能:
-
虚拟私有云(VPC)- 在数据来源配置中指定 VpcConfiguration。请参阅配置 Amazon Kendra 以使用 VPC。
您只能使用私有子网。如果您的 RDS 实例位于您的 VPC 的公有子网中,则可以创建一个私有子网,该子网可以出站访问公有子网中的 NAT 网关。VPC 配置中提供的子网必须位于美国西部(俄勒冈州)、美国东部(弗吉尼亚北部)和欧洲(爱尔兰)。
-
字段映射 - 选择将数据库数据来源字段映射到 Amazon Kendra 索引字段。有关更多信息,请参阅映射数据来源字段。
要搜索您的文档,必须输入文档正文字段或文档正文等效字段。Amazon Kendra您必须将数据来源中的文档正文字段名映射到索引字段名称 _document_body。其他所有字段均为可选字段。
-
用户上下文筛选和访问控制 – 如果文档有 ACL,则 Amazon Kendra 会爬取文档的访问控制列表(ACL)。ACL 信息用于根据用户或其所在组对文档的访问权限来筛选搜索结果。有关更多信息,请参阅用户上下文筛选。