会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
……
大码王
科研师
博客园
首页
新随笔
新文章
联系
管理
订阅
2020年6月2日
sparkcore入门到实战之(8) 《Spark性能优化之开发调优篇》
摘要: 开发调优 Spark性能优化的第一步,就是要在开发Spark作业的过程中注意和应用一些性能优化的基本原则。开发调优,就是要让大家了解以下一些Spark基本开发原则,包括:RDD lineage设计、算子的合理使用、特殊操作的优化等。在开发过程中,时时刻刻都应该注意以上原则,并将这些原则根据具体的业务
阅读全文
posted @ 2020-06-02 18:52 大码王
阅读(300)
评论(0)
推荐(0)
编辑
公告
、
复制代码