RocketMQ与Kafka对比
摘要：卡夫卡的分区设计 生产者写作的并行性受分区数量的限制。 消费者消费并行度也受到消费分区数量的限制。假设分区数为20，则最大并发消费消费者数为20。 每个主题由固定数量的分区组成。分区编号确定单个代理可能具有的最大主题数，而不会显着影响性能。 更多细节请参考这里。 为什么Kafka不能支持更多分区 每
阅读全文
posted @
2017-04-10 11:34
风又奈何
阅读(5836)
推荐(0) 编辑
Apache kafka原理与特性(0.8V)
摘要：前言: kafka是一个轻量级的/分布式的/具备replication能力的日志采集组件,通常被集成到应用系统中,收集"用户行为日志"等,并可以使用各种消费终端(consumer)将消息转存到HDFS等其他结构化数据存储系统中.因为日志消息通常为文本数据,尺寸较小,且对实时性以及数据可靠性要求不严格
阅读全文
posted @
2017-04-10 11:33
风又奈何
阅读(523)
推荐(0) 编辑
Benchmarking Apache Kafka: 2 Million Writes Per Second (On Three Cheap Machines)
摘要：I wrote a blog post about how LinkedIn uses Apache Kafka as a central publish-subscribe log for integrating data between applications, stream processi
阅读全文
posted @
2017-04-10 11:32
风又奈何
阅读(238)
推荐(0) 编辑
分布式发布订阅消息系统 Kafka 架构设计
摘要：转自：http://www.oschina.net/translate/kafka-design 参与翻译(4人)：fbm, 飞翔的猴子, Khiyuan, nesteaa 感谢这些同志们的辛勤工作，翻译的真不错，目前见到的最好的Kafka中文文章 我们为什么要搭建该系统 Kafka是一个消息系统，
阅读全文
posted @
2017-04-10 11:26
风又奈何
阅读(590)
推荐(0) 编辑
Kafka命令行常用命令说明
摘要：基于0.8.0版本。 ##查看topic分布情况kafka-list-topic.sh bin/kafka-list-topic.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 （列出所有topic的分区情况） bin/kafka-l
阅读全文
posted @
2017-04-10 11:09
风又奈何
阅读(2814)
推荐(0) 编辑
Kafka分布式消息系统
摘要：Kafka[1]是linkedin用于日志处理的分布式消息队列，linkedin的日志数据容量大，但对可靠性要求不高，其日志数据主要包括用户行为（登录、浏览、点击、分享、喜欢）以及系统运行日志（CPU、内存、磁盘、网络、系统及进程状态）。 当前很多的消息队列服务提供可靠交付保证，并默认是即时消费（不
阅读全文
posted @
2017-04-10 11:08
风又奈何
阅读(174)
推荐(0) 编辑
快速理解Kafka分布式消息队列框架
摘要：作者：刘旭晖 Raymond 转载请注明出处 Email：colorant at 163.com BLOG：http://blog.csdn.net/colorant/ ==是什么 == 简单的说，Kafka是由Linkedin开发的一个分布式的消息队列系统(Message Queue) 目标Sco
阅读全文
posted @
2017-04-10 11:07
风又奈何
阅读(194)
推荐(0) 编辑
消息系统Kafka介绍
摘要：转：http://blog.csdn.net/xiaolang85/article/details/17913817 1、 概述 Kafka是Linkedin于2010年12月份开源的消息系统，它主要用于处理活跃的流式数据。活跃的流式数据在web网站应用中非常常见，这些数据包括网站的pv、用户访问了
阅读全文
posted @
2017-04-10 11:05
风又奈何
阅读(186)
推荐(0) 编辑
