2019年8月16日
spark调优
摘要： 博客来源：https://blog.csdn.net/yhb315279058/article/details/50466125 问题1：reduce task数目不合适 问题2：shuffle磁盘IO时间长 问题3：map|reduce数量大，造成shuffle小文件数目多 问题4：序列化时间长、 阅读全文
posted @ 2019-08-16 09:56 carsonwuu 阅读(229) 评论(0) 推荐(0) 编辑