09 2015 档案
Scala中Iterator允许执行一次
摘要:背景 使用spark执行mapPartitionsWithIndex((index,iterator)=>{....}),在执行体中将iterator进行一次迭代后,再次根据iterator执行迭代,iterator迭代体未执行。 猜想及验证过程 猜测iterator只能执行一次迭代。 测试例子如下 阅读全文
posted @ 2015-09-18 13:41 呵呵鱼 阅读(6405) 评论(3) 推荐(0)
Hadoop基础
摘要:Hadoop 阅读全文
posted @ 2015-09-13 23:14 呵呵鱼 阅读(171) 评论(0) 推荐(0)