[置顶] 【Hadoop】利用MultipleOutputs,MultiOutputFormat实现以不同格式输出到多个文件

摘要: Hadoop 利用MultipleOutputs,MultiOutputFormat实现以不同格式输出到多个文件 阅读全文

posted @ 2012-08-07 14:10 iDonal 阅读(2997) 评论(0) 推荐(0) 编辑

2012年8月9日

【Hadoop】矩阵相乘MapReduce实现

摘要: Method 1 A:M*KB: k*NInput A : M行 sequenceFIle <Int,Array(k)>B: N 行 sequenceFIle <Int,Array(k)>Map: If read line from AFor j = 1->NCollect(<(linenum,j), vector(k)>)If read line from BFor I = 1->MCollect(<(i,linenum)>,vector(k)>)Reduce: While(iterator.hasNext())Vi = it 阅读全文

posted @ 2012-08-09 16:53 iDonal 阅读(720) 评论(0) 推荐(1) 编辑

导航