会员
周边
捐助
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
陕西小楞娃
博客园
首页
新随笔
联系
订阅
管理
2021年3月16日
spark_streaming_微批量处理
摘要: 数据处理方式有两种 有界数据 --> 批量处理 无界数据 --> 流式处理 数据按照时间处理方式两种 离线计算 实时计算 spark streaming 微处理数据方式 获取元数据,先receiver(并短暂存储) 在进行计算 获取元数据,放入到队列中(存储) ,直接direct进行计算 服务器方式
阅读全文
posted @ 2021-03-16 23:18 陕西小楞娃
阅读(409)
评论(0)
推荐(0)
编辑