kafka静态消费组成员

摘要: 背景: 目前kafka消费者在加入消费组过程中,只需要指定消费组名称即可,这种消费模式存在一个问题,任何一个消费者离开或者加入消费组都会带来coordinator端对消费组的再平衡操作。但是当集群消费组成员数量与所订阅的topic数量过大时,这种再平衡操作会带来大量的数据传输,造成消费数据的延时会很 阅读全文
posted @ 2019-11-08 12:03 forever_time 阅读(456) 评论(0) 推荐(0) 编辑

linux环境安装Gradle

摘要: 1.下载 Gradle是基于Ant和Maven的构建工具,同样需要Java运行环境,安装之前需要先安装配置好Java环境。 Gradle官方下载地址:https://gradle.org/releases/ 2.解压安装 3.修改配置 a.系统环境变量 vim /etc/profile export 阅读全文
posted @ 2019-07-16 16:19 forever_time 阅读(709) 评论(0) 推荐(0) 编辑

linux 监控进程实时网络流量

摘要: 参考链接 https://linux.cn/article-2808-1.html NetHogs 是一个开源的命令行工具(类似于Linux的top命令),用来按进程或程序实时统计网络带宽使用率. 来自NetHogs项目网站: NetHogs是一个小型的’net top’工具,不像大多数工具那样拖慢 阅读全文
posted @ 2019-06-24 10:35 forever_time 阅读(421) 评论(0) 推荐(0) 编辑

kafka源码阅读环境 IDEA(推荐)

摘要: 搭建步骤类似与eclipse下类似 个人推荐IDEA下阅读,IDEA对kafka项目兼容性更好 IDEA下载注册后可采用注册码方法进行激活,网址http://idea.lanyus.com/ IDEA下导入kafka项目 1 在kafka源码路径下执行gradle idea 2 import pro 阅读全文
posted @ 2019-05-14 14:35 forever_time 阅读(1367) 评论(0) 推荐(0) 编辑

windows环境下kafka源代码开发环境搭建

摘要: 开发环境: Oracle Java + Eclipse + Scala + Gradle + Kafka 1、Gradle安装配置 https://www.gradle.org/downloads/ 下载最新的Gradle版本。下载解压到一个目录,然后创建一个环境变量GRADLE_HOME指向解压的 阅读全文
posted @ 2019-05-14 10:31 forever_time 阅读(824) 评论(0) 推荐(0) 编辑