摘要: 运行 ./sbin/start-master.sh : SparkCommand:/usr/lib/jvm/java-8-openjdk-amd64/jre/bin/java -cp /home/server/spark/conf/:/home/server/spark/jars/*:/home/s 阅读全文
posted @ 2017-09-24 22:27 四叶草Grass 阅读(379) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.jianshu.com/p/082ef79c63c1 broadcast 官方文档描述: Broadcast a read-only variable to the cluster, returning a [[org.apache.spark.broadcast.Br 阅读全文
posted @ 2017-09-24 22:17 四叶草Grass 阅读(391) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.cnblogs.com/luotianshuai/p/5206662.html Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 我们想分析下用户行为(pageviews),以便我们设计出更好的广告位 阅读全文
posted @ 2017-09-24 21:12 四叶草Grass 阅读(143) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.cnblogs.com/weixiuli/p/6413109.html 一、相关参数配置 1、System ############################ System ############################# #唯一标识在集群中的ID,要求 阅读全文
posted @ 2017-09-24 21:03 四叶草Grass 阅读(188) 评论(0) 推荐(0) 编辑