随笔分类 - Flume
摘要:官方文档参数解释:http://flume.apache.org/FlumeUserGuide.html#hdfs-sink需要注意:文件格式,fileType=DataStream 默认为SequenceFile,是hadoop的文件格式,改为DataStream就可直接读了(SqeuenceFi...
阅读全文
摘要:理解FlumeNG的batchSize和transactionCapacity参数和传输事务的原理:http://blog.itpub.net/29754888/viewspace-1220545/Flume中transactionCapacity和batchSize概念的具体分析和解惑:http:
阅读全文
摘要:例子参考资料:http://www.aboutyun.com/thread-8917-1-1.html自定义sink实现和属性注入:http://www.coderli.com/flume-ng-sink-properties/自定义拦截器:http://blog.csdn.net/xiao_jun...
阅读全文