Для чего нужен Kafka Mirror Maker?

Kafka Mirror Maker — это инструмент для репликации данных между кластерами Kafka, потенциально расположенными в разных дата-центрах. Он работает как консюмер в исходном кластере и продюсер в целевом.

Сценарии использования:

• Создание резервной копии данных (disaster recovery)
• Объединение данных из нескольких дата-центров
• Миграция данных между кластерами

На собеседовании: Mirror Maker 2 (MM2), основанный на Kafka Connect, значительно улучшил оригинальный Mirror Maker: поддержка exactly-once, автоматическая синхронизация конфигурации топиков и consumer group offsets.