2014年12月8日
MapReduce Job调试教训
摘要： [2014.12.08]一个Job, Map跑了40分钟，Reduce挂了；fix bug, 重跑，Reduce又挂了，......,三个小时过去了，又再重跑，时间啊。。。。以后，调试MR Job, 老老实实按以下方法：(1)先本地单测通过，(2)mapper 为自己的逻辑，然后 -reduce='... 阅读全文
posted @ 2014-12-08 17:39 apricot 阅读(146) 评论(0) 推荐(0) 编辑