2015年8月26日
Spark之命令
摘要： Spark之命令 1.spark运行模式有4种： a.local 多有用测试, b. standalone：spark 集群模式，使用spark自己的调度方式。 c. Yarn: 对MapreduceV1升级的经典版本，支持spark。 d.Mesos:类似Yarn的资源调度框架，提供了有效的、跨分布式应用或框架的资源隔离和共享，可以运行hadoop、spark等框架 2.spark loc... 阅读全文
posted @ 2015-08-26 21:39 农民阿姨 阅读(1245) 评论(0) 推荐(0) 编辑
Spark之集群搭建
摘要： 注意,这种安装方式是集群方式:然后有常用两种运行模式: standalone , on yarn区别就是在编写 standalone 与 onyarn 的程序时的配置不一样,具体请参照spar2中的例子.提交方式:standalone spark-submit --class testkmeans.... 阅读全文
posted @ 2015-08-26 15:03 农民阿姨 阅读(385) 评论(0) 推荐(0) 编辑