摘要: 问题背景: 上周发现了一个spark job的执行时间从原来的10-15分钟延迟到了7个小时!wtf,这是出了什么事引起了这么大的性能问题!! 立马查看job的运行日志,发现多次运行都是在某一个固定的stage速度特别慢,大概在5000-6000s,这样的stage一共有3-4次。究竟是什么样的原因 阅读全文
posted @ 2018-06-25 16:40 J. Lingear 阅读(295) 评论(0) 推荐(0) 编辑