2018年5月9日
Spark程序运行常见错误解决方法以及优化
摘要： 一.org.apache.spark.shuffle.FetchFailedException 1.问题描述 这种问题一般发生在有大量shuffle操作的时候,task不断的failed,然后又重执行，一直循环下去，非常的耗时。 2.报错提示 (1) missing output location 阅读全文
posted @ 2018-05-09 09:09 double_kill 阅读(37500) 评论(0) 推荐(2) 编辑