Migrer les charges de travail Kafka vers un cluster Amazon MSK

Amazon MSK Replicator prend en charge les migrations entre des clusters Amazon MSK au sein d'un même cluster. Compte AWS Pour les migrations à partir de clusters autres que MSK, tels que vos charges de travail Apache Kafka, ou entre des clusters Amazon MSK entre comptes, vous devez utiliser Apache 2.0. MirrorMaker

MSK Replicator est une solution sans serveur entièrement gérée qui automatise la migration des données vers Amazon MSK. MSK Replicator gère les tâches de mise à l'échelle, de surveillance et de maintenance sans nécessiter de gestion de l'infrastructure. Il gère également les configurations thématiques et les décalages entre les groupes de consommateurs pendant la migration, et s'intègre à d'autres Services AWS.

Apache MirrorMaker 2.0 est un outil open source qui nécessite une configuration et une gestion manuelles, mais qui fournit un contrôle détaillé du processus de migration. Vous pouvez définir des règles de réplication personnalisées et migrer entre n'importe quel cluster Apache Kafka, quelle que soit la plate-forme d'hébergement ou entre différentes Comptes AWS plateformes. Pour plus d'informations sur l'utilisation MirrorMaker pour migrer vos clusters, consultez la section Géo-réplication (mise en miroir des données entre clusters). Nous vous recommandons de l'installer MirrorMaker dans une configuration à haute disponibilité.

Pour plus d'informations sur la manière de choisir la stratégie de réplication adaptée à votre charge de travail, consultez Amazon MSK Replicator et MirrorMaker 2 : Choisir la bonne stratégie de réplication pour la reprise après sinistre et les migrations d'Apache Kafka.