08 2015 档案

【原创】如何确定Kafka的分区数、key和consumer线程数
摘要：在Kafak中国社区的qq群中，这个问题被提及的比例是相当高的，这也是Kafka用户最常碰到的问题之一。本文结合Kafka源码试图对该问题相关的因素进行探讨。希望对大家有所帮助。怎么确定分区数？ “我应该选择几个分区？”——如果你在Kafka中国社区的群里，这样的问题你会经常碰到的。不过有些遗憾的... 阅读全文
posted @ 2015-08-25 12:28 huxihx 阅读(68746) 评论(21) 推荐(11) 编辑
【原创】Kafka console consumer源代码分析(二)
摘要：我们继续讨论console consumer的实现原理，本篇着重探讨ZookeeperConsumerConnector的使用，即后续所有的内容都由下面这条语句而起：val connector = Consumer.create(config)那么问题来了？这条语句后面执行了什么呢？我们先看crea... 阅读全文
posted @ 2015-08-11 21:07 huxihx 阅读(1742) 评论(0) 推荐(0) 编辑