会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
首页
联系
Github
博客园
管理
友情链接
暂未分类
我从二院来
苍茫之天涯,乃吾辈之所爱也;浩瀚之程序,亦吾之所爱也,然则何时而爱耶?必曰:先天下之忧而忧,后天下之爱而爱也!
博客园
首页
新随笔
联系
订阅
管理
2017年6月27日
spark streaming集成kafka接收数据的方式
摘要: spark streaming是以batch的方式来消费,strom是准实时一条一条的消费。当然也可以使用trident和tick的方式来实现batch消费(官方叫做mini batch)。效率嘛,有待验证。不过这两种方式都是先把数据从kafka中读取出来,然后缓存在内存或者第三方,再定时处理。如果
阅读全文
posted @ 2017-06-27 14:52 是奉壹呀
阅读(3948)
评论(0)
推荐(0)
编辑
公告
好文要赞
关注我
收藏该文
←
→
↓
↑