随笔分类 -  Kafka

摘要:单线程消费 以之前生产者中的代码为例,事先准备好了一个 Topic:data-push,3个分区。 先往里边发送 100 条消息,没有自定义路由策略,所以消息会均匀的发往三个分区。 先来谈谈最简单的单线程消费,如下图所示: 由于数据散列在三个不同分区,所以单个线程需要遍历三个分区将数据拉取下来。 单 阅读全文
posted @ 2018-11-21 10:42 UniqueColor 阅读(3852) 评论(0) 推荐(0) 编辑
摘要:近期在搞kafka,在Windows环境搭建的过程中遇到一些问题,把具体的流程几下来防止后面忘了。 准备工作: 1.安装jdk环境 http://www.oracle.com/technetwork/java/javase/downloads/index.html 2.下载kafka的程序安装包:  阅读全文
posted @ 2018-03-27 14:34 UniqueColor 阅读(1192) 评论(0) 推荐(0) 编辑
摘要:介绍Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能,但具有自己独特的设计。这个独特的设计是什么样的呢?首先让我们看几个基本的消息系统术语:Kafka将消息以topic为单位进行归纳。将向Kafka topic发布消息的程序成为producers.将预订topics并 阅读全文
posted @ 2018-01-25 17:11 UniqueColor 阅读(194) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示