2018年5月3日
spark 读取mongodb失败,报executor time out 和GC overhead limit exceeded 异常
摘要： 代码： 使用上述的代码取userGroupMapping 集合过后的100条记录，出现了executor time out 和GC overhead limit exceeded 异常。一开始以为推测是task 从mongodb取的数据太大，导致spark executor内存不够，后来调研了一下s 阅读全文
posted @ 2018-05-03 11:19 yimison 阅读(353) 评论(0) 推荐(0) 编辑