会员
周边
捐助
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
林**
博客园
首页
新随笔
联系
订阅
管理
2019年7月25日
Spark 各种示例
摘要: 1. spark 去重 (将每一行数据做为key来分组,这样就进行了去重,然后再取出key就可以了) 原数据: 2012-3-1 a 2012-3-2 b 2012-3-3 c 2012-3-2 b 实现源码: rdd.filter(_.trim().length() > 0).map(line =
阅读全文
posted @ 2019-07-25 10:21 林**
阅读(702)
评论(0)
推荐(0)
编辑
公告