摘要:
转:http://blog.csdn.net/xiaolang85/article/details/38044689 2014年7月4日,我从百度离职了。 这是第一次,我不是因为和老板闹翻而离职; 这是第一次,我带着晋升的喜悦而离职; 这是第一次,我带着满满的收获而离职。 我曾经认为,我永远不会成为 阅读全文
摘要:
很多人慕企业之名而来,却常常因为直接领导而离职,为什么呢? 紧盯10%的错误 我在“说你玻璃心的就想免费耍流氓”一文的开始,讲了F的故事,F的领导的做法,完美演示了一个技术领导如何通过紧盯小错误来“完美挫伤”程序员,让其再也提不起干劲与活力。 摘录一部分: 有位朋友F,第一次找我聊天是两个月前,他说 阅读全文
摘要:
卡夫卡的分区设计 生产者写作的并行性受分区数量的限制。 消费者消费并行度也受到消费分区数量的限制。假设分区数为20,则最大并发消费消费者数为20。 每个主题由固定数量的分区组成。分区编号确定单个代理可能具有的最大主题数,而不会显着影响性能。 更多细节请参考这里。 为什么Kafka不能支持更多分区 每 阅读全文
摘要:
前言: kafka是一个轻量级的/分布式的/具备replication能力的日志采集组件,通常被集成到应用系统中,收集"用户行为日志"等,并可以使用各种消费终端(consumer)将消息转存到HDFS等其他结构化数据存储系统中.因为日志消息通常为文本数据,尺寸较小,且对实时性以及数据可靠性要求不严格 阅读全文
摘要:
I wrote a blog post about how LinkedIn uses Apache Kafka as a central publish-subscribe log for integrating data between applications, stream processi 阅读全文
摘要:
转自:http://www.oschina.net/translate/kafka-design 参与翻译(4人):fbm, 飞翔的猴子, Khiyuan, nesteaa 感谢这些同志们的辛勤工作,翻译的真不错,目前见到的最好的Kafka中文文章 我们为什么要搭建该系统 Kafka是一个消息系统, 阅读全文
摘要:
基于0.8.0版本。 ##查看topic分布情况kafka-list-topic.sh bin/kafka-list-topic.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 (列出所有topic的分区情况) bin/kafka-l 阅读全文
摘要:
Kafka[1]是linkedin用于日志处理的分布式消息队列,linkedin的日志数据容量大,但对可靠性要求不高,其日志数据主要包括用户行为(登录、浏览、点击、分享、喜欢)以及系统运行日志(CPU、内存、磁盘、网络、系统及进程状态)。 当前很多的消息队列服务提供可靠交付保证,并默认是即时消费(不 阅读全文
摘要:
作者:刘旭晖 Raymond 转载请注明出处 Email:colorant at 163.com BLOG:http://blog.csdn.net/colorant/ ==是什么 == 简单的说,Kafka是由Linkedin开发的一个分布式的消息队列系统(Message Queue) 目标Sco 阅读全文
摘要:
转:http://blog.csdn.net/xiaolang85/article/details/17913817 1、 概述 Kafka是Linkedin于2010年12月份开源的消息系统,它主要用于处理活跃的流式数据。活跃的流式数据在web网站应用中非常常见,这些数据包括网站的pv、用户访问了 阅读全文