MirrorMaker kafka跨集群同步方案

   日期:2020-11-14     浏览:150    评论:0    
核心提示:https://www.hhj100.com/https://detail.tmall.com/item.htm?id=604066404838&ali_trackid=2:mm_108689443_36918578_132750161:1605175004_298_342186384&union_lens=lensId:OPT@1605174999@0bb8e51b_6753_175bbe2b8d5_bbd9@01;recoveryid:201_11.23.123.50_860

以下内容是我之前配置的集群同步方案。

 

脚本路径

/usr/local/kafka/bin/kafka-mirror-maker.sh

 

consumer.properties

bootstrap.servers=10.255.30.152:9092

group.id=mirrorGroupTest

auto.offset.reset=earliest

partition.assignment.strategy=org.apache.kafka.clients.consumer.RoundRobinAssignor

producer.properties

bootstrap.servers=10.255.30.132:9092 compression.type=none retries=3

启动脚本:start-mirror-maker.sh

nohup bin/kafka-mirror-maker.sh --consumer.config MirrorMaker/consumer.properties --producer.config MirrorMaker/producer.properties --whitelist ' test' &

 

如需要调试,查看debug日志 可以修改

/usr/local/kafka/config/tools-log4j.properties

接下来进行测试:

需要注意的问题:

consumer.properties (10.255.30.152:9092) 需要同步的消息源集群

producer.properties (10.255.30.132:9092) 为消息目标集群

结果:消息写入10.255.30.152:9092 集群, 此时消息会被复制到目标集群10.255.30.132:9092。

 

惠惠街 每天千款优惠劵秒杀

 

 
打赏
 本文转载自:网络 
所有权利归属于原作者,如文章来源标示错误或侵犯了您的权利请联系微信13520258486
更多>最近资讯中心
更多>最新资讯中心
0相关评论

推荐图文
推荐资讯中心
点击排行
最新信息
新手指南
采购商服务
供应商服务
交易安全
关注我们
手机网站:
新浪微博:
微信关注:

13520258486

周一至周五 9:00-18:00
(其他时间联系在线客服)

24小时在线客服