2018年3月29日
MapReduce实例&YARN框架
摘要： MapReduce实例&YARN框架 一个wordcount程序 统计一个相当大的数据文件中，每个单词出现的个数。 一、分析map和reduce的工作 map： 1. 切分单词 2. 遍历单词数据输出 reduce： 对从map中得到的数据的valuelist遍历累加，得到一个单词的总次数 二、代码 阅读全文
posted @ 2018-03-29 17:28 thousfeet 阅读(960) 评论(0) 推荐(0) 编辑
/* */