会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Leil_blogs
博客园
首页
新随笔
联系
订阅
管理
2022年1月10日
Spark书籍笔记
摘要: 1、MapReduce相比Spark 1)MapReduce 编程模型表达能力弱,只有map和reduce(map-shuffle-reduce)、难以实现复杂的数据操作 处理流程固定,难以实现迭代式计算 数据基于磁盘进行传递,效率较低 2)Spark 抽象出RDD的数据结构,DAG图组合数据处理操
阅读全文
posted @ 2022-01-10 09:26 Leil_blogs
阅读(56)
评论(0)
推荐(0)
编辑
公告