会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
阳光丶微笑
博客园
首页
新随笔
联系
订阅
管理
2016年4月20日
jmxtrans监控kafka
摘要: 我们知道jmx可以将程序内部的信息暴露出来,但是要想监控这些信息的话,就还需要自己写java程序调用jmx接口去获取数据,并按照某种格式发送到其他地方(如监控程序zabbix,ganglia)。这时jmxtrans就派上用场了,jmxtrans的作用是自动去jvm中获取所有jmx格式数据,并按照某种
阅读全文
posted @ 2016-04-20 11:49 阳光丶微笑
阅读(3289)
评论(0)
推荐(0)
2016年3月30日
kafka消费数据存入elasticsearch代码示例
摘要: package com.unimas.test; import java.util.ArrayList; import java.util.HashMap; import java.util.List; import java.util.Map; import java.util.Properties; import java.util.Set; import java.util.concu...
阅读全文
posted @ 2016-03-30 16:45 阳光丶微笑
阅读(12372)
评论(1)
推荐(0)
kafka修改指定消费组的偏移量
摘要: 针对这个我们可以通过修改zookeeper中的信息来重置一个topic的消费组的offset,以下是代码
阅读全文
posted @ 2016-03-30 16:29 阳光丶微笑
阅读(8000)
评论(0)
推荐(0)
kafka查询指定时间数据的偏移量
摘要: package com.unimas.test; import java.util.ArrayList; import java.util.Collections; import java.util.Date; import java.util.HashMap; import java.util.List; import java.util.Map; import java.util.Map....
阅读全文
posted @ 2016-03-30 16:06 阳光丶微笑
阅读(9799)
评论(0)
推荐(0)
2016年3月4日
linux定时任务crontab介绍
摘要: 首先解释一下这个命令 crontab -e 编辑或者创建crontab文件crontab -l 列出已建立定时任务 在crontab文件中写入自己要定时运行的脚本 [root@f14cp-kf1-03 ~]# crontab -e #定时启动kafka同步任务 25 15 * * * /usr/hd
阅读全文
posted @ 2016-03-04 16:03 阳光丶微笑
阅读(1067)
评论(0)
推荐(1)
2016年3月2日
kafka跨集群同步方案
摘要: Kafka跨集群同步、创建Kafka集群镜像等相关问题,主要使用Kafka内置的MirrorMaker工具实现。 Kafka镜像即已有Kafka集群的副本。使用MirrorMaker工具创建从源Kafka集群(source cluster)到目标Kafka集群(target cluster)的镜像。
阅读全文
posted @ 2016-03-02 17:27 阳光丶微笑
阅读(4530)
评论(0)
推荐(0)
2015年12月25日
hadoop配置参数速查大全
摘要: dfs.block.access.key.update.interval=600dfs.block.access.token.enable=falsedfs.block.access.token.lifetime=600dfs.blockreport.initialDelay=0dfs.blockr...
阅读全文
posted @ 2015-12-25 14:25 阳光丶微笑
阅读(3529)
评论(0)
推荐(1)
kafka生产者消费者示例代码
摘要: 生产者: 消费者:
阅读全文
posted @ 2015-12-25 14:19 阳光丶微笑
阅读(700)
评论(0)
推荐(0)
公告