摘要: 正在测试的程序需要多次迭代(400+次),每次迭代有复杂的运算迭代到100多次的时候报java.lang.stackoverflowerror的错误解决方法:先checkpoint()再count(),切断rdd的lineage,防止因为DAG过深出现栈溢出 阅读全文
posted @ 2014-06-26 09:20 图样图森破 阅读(2123) 评论(0) 推荐(0) 编辑