在 Amazon RDS OpenSearch 中使用采集管道

您可以将 OpenSearch 采集管道与 Amazon RDS 配合使用，将现有数据和流更改（例如创建、更新和删除）导出到亚马逊 OpenSearch 服务域和集合。 OpenSearch Ingestion 管道整合了变更数据捕获 (CDC) 基础架构，为持续从 Amazon RDS 流式传输数据提供了一种高规模、低延迟的方式。支持 RDS for MySQL 和 RDS for PostgreSQL

您可以通过两种方式将 Amazon RDS 作为处理数据的来源：有或没有完整初始快照。完整初始快照是指定表的快照，此快照将导出至 Amazon S3。从那里，In OpenSearch gestion 管道将其发送到域中的一个索引，或者将其分区到域中的多个索引。为了保持 Amazon RDS 中的数据并保持 OpenSearch 一致，该管道将 Amazon RDS 实例中表中的所有创建、更新和删除事件与保存在一个或多个索引中的 OpenSearch 文档同步。

当您使用完整的初始快照时，您的 OpenSearch 摄取管道会首先提取快照，然后开始从 Amazon RDS 更改流中读取数据。它最终会赶上并保持 Amazon RDS 和 OpenSearch之间近乎实时的数据一致性。

您还可以使用 OpenSearch Ingestion 与 Amazon RDS 的集成来跟踪更改数据捕获并将所有更新收录到 Aurora 中。 OpenSearch如果您已通过其他机制获取完整快照，或仅需捕获 Amazon RDS 实例中数据的所有更改，则选择此选项。

选择此选项时，您需要配置 Amazon RDS for MySQL 二进制日志记录或为 Amazon RDS for PostgresSQL 数据库实例设置逻辑复制。