随笔分类 - kafka消息队列
摘要:新建一个cmd窗口,zkServer命令启动zookeeper 打开另一个cmd窗口,输入: cd D:\Worksoftware\Apachekafka2.11\bin\windows kafka-server-start D:\Worksoftware\Apachekafka2.11\confi
阅读全文
摘要:这个世界既不是有钱人的世界,也不是有权人的世界,它是有心人的世界。 一些有用的命令 实体类: KafkaProducerMessage.cs代码: KafkaConsumerMessage.cs代码: KafkaProducerMessageArchive.cs代码: vwMaxOffsetByPa
阅读全文
摘要:最近研究分布式消息队列,分享下! 首先zookeeper 和 kafka 压缩包 解压 并配置好! 我本机zookeeper环境配置如下: D:\Worksoftware\ApacheZookeeper3\conf\zoo.cfg 以下是kafka的配置 D:\Worksoftware\Apache
阅读全文
摘要:1.首先创建一个Topic,命令如下: kafka-topics --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic MyTopic 2.创建两个控制台程序: 3.KafkaProduce
阅读全文
摘要:Storm集成Kafka应用的开发 我们知道storm的作用主要是进行流式计算,对于源源不断的均匀数据流流入处理是非常有效的,而现实生活中大部分场景并不是均匀的数据流,而是时而多时而少的数据流入,这种情况下显然用批量处理是不合适的,如果使用storm做实时计算的话可能因为数据拥堵而导致服务器挂掉,应
阅读全文
摘要:完整解决方案请参考: Setting Up and Running Apache Kafka on Windows OS 在环境搭建过程中遇到两个问题,在这里先列出来,以方便查询: 1. \Java\jre7\lib\ext\QTJava.zip was unexpected at this tim
阅读全文