Migrer les charges de travail Kafka vers un cluster Amazon MSK

Amazon MSK Replicator prend en charge la réplication entre les clusters Amazon MSK d'un même cluster. Compte AWS Il prend également en charge les migrations entre les clusters Apache Kafka non-MSK et les clusters Amazon MSK à l'aide SASL/SCRAM de l'authentification TLS mutuelle (mTLS). Pour la réplication entre comptes entre clusters Amazon MSK, vous devez utiliser Apache MirrorMaker 2.0.

MSK Replicator est une solution sans serveur entièrement gérée qui automatise la migration des données vers Amazon MSK. MSK Replicator gère les tâches de mise à l'échelle, de surveillance et de maintenance sans nécessiter de gestion d'infrastructure. Il gère également les configurations thématiques et les décalages entre les groupes de consommateurs pendant la migration, et s'intègre aux autres Services AWS.

Apache MirrorMaker 2.0 est un outil open source qui nécessite une configuration et une gestion manuelles, mais qui permet un contrôle détaillé du processus de migration. Vous pouvez définir des règles de réplication personnalisées et migrer entre n'importe quel cluster Apache Kafka, quelle que soit la plate-forme d'hébergement ou entre différents Comptes AWS clusters. Pour plus d'informations sur l'utilisation MirrorMaker de la migration de vos clusters, consultez Geo-Replication (Mise en miroir Cross-Cluster des données). Nous vous recommandons de MirrorMaker l'installer dans une configuration hautement disponible.

Pour plus d'informations sur la migration vers Amazon MSK avec MSK Replicator, voir Migrer des clusters Apache Kafka tiers et autogérés vers des courtiers Amazon MSK Express avec Amazon MSK Replicator.