会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
icecola
博客园
首页
新随笔
联系
订阅
管理
2019年7月12日
DStream转为DF的两种方式(突破map时元组22的限制)
摘要: 在进行Spark Streaming的开发时,我们常常需要将DStream转为DataFrame来进行进一步的处理, 共有两种方式,方式一: 利用map算子和tuple来完成,一般的场景下采用这种方式即可。 但是有的时候我们会遇到列数大于22的情况,这个时候会受到scala的tuple数不能超过22
阅读全文
posted @ 2019-07-12 16:01 icecola
阅读(2387)
评论(0)
推荐(0)
编辑
公告