Kafka ワークロードを Amazon MSK クラスターに移行する

Amazon MSK Replicator は、同じAWS アカウント 内の Amazon MSK クラスター間の移行をサポートします。Apache Kafka ワークロードなどの非 MSK クラスターから移行する場合、またはクロスアカウント Amazon MSK クラスター間で移行する場合は、Apache MirrorMaker 2.0 を使用する必要があります。

MSK Replicator は、Amazon MSK へのデータ移行を自動化するフルマネージド型のサーバーレスソリューションです。MSK Replicator は、インフラストラクチャ管理を必要とせずに、スケーリング、監視、およびメンテナンスタスクを処理します。また、移行中にトピック設定とコンシューマーグループのオフセットを維持し、他の AWS のサービスと統合します。

Apache MirrorMaker 2.0 は、オープンソースのツールであり、手動での設定と管理が必要ですが、移行プロセスを詳細に制御できます。カスタムレプリケーションルールを定義し、ホスティングプラットフォームや異なるAWS アカウント に関係なく、任意の Apache Kafka クラスター間で移行できます。MirrorMaker を使用してクラスターを移行する方法については、「Geo-Replication (Cross-Cluster Data Mirroring)」を参照してください。可用性の高い設定で MirrorMaker をセットアップすることをお勧めします。

ワークロードに適したレプリケーション戦略の選択方法の詳細については、Amazon MSK Replicator と MirrorMaker2: Apache Kafka の災害復旧と移行に適したレプリケーション戦略の選択を参照してください。