会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
liuming_1992
博客园
首页
新随笔
联系
管理
订阅
2017年3月15日
[Spark] - SparkCore程序优化总结
摘要: http://spark.apache.org/docs/1.6.1/tuning.html1) 代码优化 a. 对于多次使用的RDD,进行数据持久化操作(eg: cache、persist) b. 如果对同一个份数据进行操作,那么尽量公用一个RDD c. 优先使用reduceByKey和aggre
阅读全文
posted @ 2017-03-15 15:00 liuming_1992
阅读(4596)
评论(0)
推荐(0)
编辑
公告