2017年12月4日
ALS部署Spark集群入坑记
摘要： 栈溢出原因：由于ASL的迭代次数过多，DAG过深，导致RDD的lineage，栈溢出。 现有解决：1.迭代次数减少。 2.利用checkpoint？ 参考： 1. " 记一次spark mllib stackoverflow踩坑" 2. "一个 KCore 算法引发的 StackOverflow 奇 阅读全文
posted @ 2017-12-04 10:33 开水白菜 阅读(943) 评论(0) 推荐(0) 编辑