2018年9月13日
Flume HA
摘要： flume提供fail over和load balance功能 1.添加collector配置（配置两个collector） # Name the components on this agents1.sources = r1s1.sinks = k1s1.channels = c1 # Descr 阅读全文
posted @ 2018-09-13 12:16 zhya_hopeful 阅读(481) 评论(0) 推荐(0) 编辑
Flume采集日志
摘要： 角色 Source 数据来源 (exec, kafka, http…)Channel 数据通道 (memory,file,jdbc)Sink 数据目的地 （kafka,hdfs,es…） Agent 代理，负责从source中采集数据，发送给collectorCollector 收集者，收集agen 阅读全文
posted @ 2018-09-13 12:15 zhya_hopeful 阅读(365) 评论(0) 推荐(0) 编辑
Scrapy入门
摘要： 阅读全文
posted @ 2018-09-13 12:13 zhya_hopeful 阅读(120) 评论(0) 推荐(0) 编辑
Kafka集群搭建和配置
摘要： Kafka配置优化 https://www.jianshu.com/p/f62099d174d9 1.安装&配置 下载tar包 解压后即可使用 修改配置文件 将server.properties复制和修改为三个配置文件（为启动3个kafka服务做准备） 设置broker.id，集群中各节点的标识，要 阅读全文
posted @ 2018-09-13 12:11 zhya_hopeful 阅读(763) 评论(0) 推荐(0) 编辑
Redis哨兵配置
摘要： 阅读全文
posted @ 2018-09-13 12:10 zhya_hopeful 阅读(152) 评论(0) 推荐(0) 编辑
Centos7安装kubernetes
摘要： Kubernetes官网提供的安装指引使用的google的yum源，正常情况下无法使用，这里使用阿里的yum源来安装。 参考这2篇博客 https://blog.myzony.com/centos-7-4-an-zhuang-k8s-v1-11-0-ji-qun-suo-yu-dao-de-wen- 阅读全文
posted @ 2018-09-13 12:07 zhya_hopeful 阅读(134) 评论(0) 推荐(0) 编辑