摘要: Hadoop生态圈-Kafka的旧API实现生产者-消费者 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 一.旧API实现生产者-消费者 1>.开启kafka集群 [yinzhengjie@s101 ~]$ more `which xkafka.sh` #!/bin/bash # 阅读全文
posted @ 2018-06-21 18:37 尹正杰 阅读(403) 评论(0) 推荐(0) 编辑
摘要: Apache Kafka运维常用命令 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 一.管理Kafka服务的命令 1>.开启kafka服务 2>.停止kafka服务(刷新日志到本地且迁移当前broker的所有leader的parition) 3>.查看kafka进程ID 二.ka 阅读全文
posted @ 2018-06-21 17:12 尹正杰 阅读(915) 评论(0) 推荐(0) 编辑
摘要: 企业级Apache Kafka部署实战篇 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 一.安装zookeeper集群 1>.下载zookeeper [root@node106.yinzhengjie.org.cn ~]# yum -y install wget Loaded p 阅读全文
posted @ 2018-06-21 15:31 尹正杰 阅读(2512) 评论(0) 推荐(0) 编辑
摘要: Hadoop生态圈-Kafka的本地模式部署 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 一.Kafka简介 1>.什么是JMS 答:在Java中有一个角消息系统的东西,我们叫他Java Message Service,简称JMS。比如各种MQ。 2>.JMS的两种工作模式 第 阅读全文
posted @ 2018-06-21 14:53 尹正杰 阅读(661) 评论(0) 推荐(0) 编辑
摘要: Hadoop生态圈-Flume的组件之自定义拦截器(interceptor) 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 本篇博客只是举例了一个自定义拦截器的方法,测试字节传输速度。 1>.自定义interceptor方法 2>.打包并将其发送到 /soft/flume/lib 阅读全文
posted @ 2018-06-21 11:55 尹正杰 阅读(382) 评论(0) 推荐(0) 编辑
摘要: Hadoop生态圈-Flume的组件之自定义Sink 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 本篇博客主要介绍sink相关的API使用两个小案例,想要了解更多关于API的小技巧请参考官网:http://flume.apache.org/FlumeDeveloperGuide 阅读全文
posted @ 2018-06-21 09:00 尹正杰 阅读(600) 评论(0) 推荐(0) 编辑