会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
首页
联系
Github
博客园
管理
友情链接
暂未分类
我从二院来
苍茫之天涯,乃吾辈之所爱也;浩瀚之程序,亦吾之所爱也,然则何时而爱耶?必曰:先天下之忧而忧,后天下之爱而爱也!
博客园
首页
新随笔
联系
订阅
管理
2021年9月2日
流处理的限速/反压机制
摘要: 本文主要是指spark+kafka,不包括flink。 摘要 > 1.spark streaming有限速(max rate),有反压(back pressure)。 2.structured streaming没有反压,只有限速。 ###1.为什么要限速和反压 一个spark集群,资源总是有限。如
阅读全文
posted @ 2021-09-02 16:41 是奉壹呀
阅读(867)
评论(0)
推荐(1)
编辑
公告
好文要赞
关注我
收藏该文
←
→
↓
↑