kafka consumer频繁reblance

转载请注明地址http://www.cnblogs.com/dongxiao-yang/p/5417956.html

 

结论与下文相同,kafka不同topic的consumer如果用的groupid名字一样的情况下,其中任意一个topic的consumer重新上下线都会造成剩余所有的consumer产生reblance行为

,即使大家不是同一个topic,这主要是由于kafka官方支持一个consumer同时消费多个topic的情况,所以在zk上一个consumer出问题后zk是直接把group下面所有的consumer都通知一遍,这个与以前观念里认为group从属于某一个topic的概念完全不同,非常坑。

https://olnrao.wordpress.com/2015/05/15/apache-kafka-case-of-mysterious-rebalances/

posted @ 2016-04-21 17:45  sanmutongzi  阅读(...)  评论(...编辑  收藏