摘要: 一、概述 接实例一,实例一中server-aget是把日志上传保存到服务器上面,随着日志越来越大,公司启动了hadoop项目,需要把日志直接上传hdfs中保存,配置文件target_hdfs.conf如下: a2.sources = r2 a2.channels = c2 a2.sinks = k2 #source a2.sources.r2.type = avro a2.sourc... 阅读全文
posted @ 2015-07-31 17:45 nemotan 阅读(665) 评论(0) 推荐(0) 编辑
摘要: 一、flume-ng简介 请参考官方文档:http://flume.apache.org/FlumeUserGuide.html 二、实例 需求说明:需要监控一个目录,并自动上传到服务器,且需要在传输过程中进行加密。 整体方案:n个client-agent -->server-agent client-agen... 阅读全文
posted @ 2015-07-31 17:09 nemotan 阅读(2080) 评论(0) 推荐(0) 编辑