摘要：
一、什么是Flume? flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。但随着 FLume 功能的扩展，Flume OG 代码工程臃肿、 阅读全文
摘要：
一：Spark集群开发环境准备 通过web端查看节点正常启动，如下图所示： 2.启动Spark集群，如下图所示： 通过web端查看集群启动正常，如下图所示： 3.启动start-history-server.sh，如下图所示： 二：HDFS的SparkStreaming案例实战（代码部分） pack 阅读全文
摘要：
一、Java方式开发 1、开发前准备：假定您以搭建好了Spark集群。 2、开发环境采用eclipse maven工程，需要添加Spark Streaming依赖。 3、Spark streaming 基于Spark Core进行计算，需要注意事项： 设置本地master，如果指定local的话，必 阅读全文