Spark集群模式&Spark程序提交
摘要：
Spark集群模式&Spark程序提交 1. 集群管理器 Spark当前支持三种集群管理方式 Standalone—Spark自带的一种集群管理方式，易于构建集群。 Apache Mesos—通用的集群管理，可以在其上运行Hadoop... 阅读全文
posted @ 2014-10-19 22:02 毛小娃 阅读(171) 评论(0) 推荐(0) 编辑
IDEA阅读Spark源码
摘要：
将spark编译成idea-sbt工程 tar -zxvf spark-1.1.0.tgz cd spark-1.1.0 sbt/sbt gen-idea 等待…… 成功后就能以SBT工程的形式导入idea进行阅读运行。 如果提示栏出现如下的提示内容"is waiting ... 阅读全文
posted @ 2014-10-19 18:27 毛小娃 阅读(112) 评论(0) 推荐(0) 编辑
