随笔分类 - [408]Flume
大数据生态
摘要:建议参考官方文档:http://flume.apache.org/FlumeUserGuide.html 示例一:用tail命令获取数据,下沉到hdfs 类似场景: 创建目录: 不断往文件中追加内容: 查看文件内容: 启动Hadoop集群。 检查下hdfs式否是salf模式: tail-hdfs.c
阅读全文
摘要:参考官方文档:http://flume.apache.org/FlumeUserGuide.html 1. 概述 1、Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 2、Flume可以采集文件,socket数据包等各种形式源数据,又可以将采集到的数据输出到HDFS、hbas
阅读全文