摘要: 1、下载已经编译好的 "kafka manager 2.0.0.2.zip安装包" 2、修改配置文件(xx安装目录/kafka manager 2.0.0.2/conf/application.conf) 3、启动kafka manager服务 4、jps查看进程验证 5、登陆Kafka Manag 阅读全文
posted @ 2020-05-02 23:00 XSmileSmile 阅读(504) 评论(0) 推荐(0) 编辑
摘要: 注:zookeeper集群节点数必须为奇数,满足leader选举算法(当选leader的节点所需支持节点数过半的原则),且>=3 1、下载zookeeper安装包 curl -O https://archive.apache.org/dist/zookeeper/zookeeper-3.4.10/z 阅读全文
posted @ 2020-05-02 22:09 XSmileSmile 阅读(517) 评论(0) 推荐(0) 编辑
摘要: 1、下载kafka安装包 "kafka_2.11 0.11.0.2.tgz" 到集群的某台节点上(hadoop1) 2、将安装包远程传输到节点hadoop2、hadoop3上 scp r kafka_2.11 0.11.0.2.tgz root@hadoop2: scp r kafka_2.11 0 阅读全文
posted @ 2020-05-02 16:46 XSmileSmile 阅读(401) 评论(0) 推荐(0) 编辑
摘要: 1、cron表达式格式 2、cron各位置取值符 参考博客: (1) "Spring Task中cron表达式详解" (2) "Spring Task定时任务的配置和使用" 阅读全文
posted @ 2020-05-02 16:23 XSmileSmile 阅读(924) 评论(0) 推荐(0) 编辑
摘要: 主要基于从kafka0.11.0版本开始之后的版本进行描述 1、批处理 传统消息中间件,一次只发送单挑消息;kafka,一次发送多条消息,微批处理。 2、客户端优化 新版客户端摒弃单线程,采用双线程模式——主线程+Sender线程。 主线程负责将消息置入客户端缓存(缓存会将多个消息聚合为1个批次); 阅读全文
posted @ 2020-05-02 16:15 XSmileSmile 阅读(324) 评论(0) 推荐(0) 编辑