2017年7月23日
Flume使用（案例分析）
摘要： "Flume官方文档" Usage: bin/flume ng [options]... commands: help display this help text agent run a Flume agent global options: conf, c use configs in dire 阅读全文
posted @ 2017-07-23 22:48 岑忠满 阅读(2591) 评论(0) 推荐(0) 编辑
一个数据仓库的设计架构
摘要： 来自服务器大型 RDBMS 的数据通过 Sqoop 工具导入 HDFS/HBase 来自服务器的日志文件通过 Flume 工具导入 HDFS/HBase 数据通过 MapReduce 程序 ，Hive/pig/impala(一个类似 hive 的内存计算框架) 工具进行数据分析，并使用 Oozie/ 阅读全文
posted @ 2017-07-23 21:57 岑忠满 阅读(471) 评论(0) 推荐(0) 编辑
Flume是什么
摘要： 分布式流式实时收集日志文件系统，便于实时在线的流式计算，常配合 Storm 和 spark streming 使用。 Flume is a distributed 分布式的, reliable 可靠的, and available 可用的 service for efficiently高效 coll 阅读全文
posted @ 2017-07-23 11:39 岑忠满 阅读(663) 评论(0) 推荐(0) 编辑