摘要: 今天先把spark的各种基本转换和动作总结下,以后有时间把各种用法放上去。1 RDD基本转换操作 map、flagMap、distinct coalesce、repartition coalesce、repartition randomSplit、... 阅读全文
posted @ 2015-12-09 15:55 R星月 阅读(1777) 评论(0) 推荐(0) 编辑
摘要: 以往都是用java运行spark的没问题,今天用scala在eclipse上运行spark的代码倒是出现了错误 ,记录首先是当我把相关的包导入好后,Run,报错:Exception in thread "main" org.apache.spark.SparkException: A master ... 阅读全文
posted @ 2015-12-09 13:24 R星月 阅读(2257) 评论(0) 推荐(0) 编辑
作者:lishaoying 出处:http://www.cnblogs.com/rxingyue 说明:本文是自己学习编程的一个历程,版权归作者和博客园共有,欢迎转载,请标明原文连接,如有问题联系我 Email:983068303@qq.com,非常感谢。

作者:lishaoying
出处:http://www.cnblogs.com/rxingyue
说明:本文是自己学习编程的一个历程,版权归作者和博客园共有,欢迎转载,请标明原文连接,如有问题联系我,非常感谢。