2015年2月23日

Sample Join Analysis

摘要： Sample data: student.txt 1,yaoshuya,25 2,yaoxiaohua,29 3,yaoyuanyie,15 4,yaoshupei,26 Sample data:score.txt 1,yuwen,100 1,shuxue,99 2,yuwen,99 2,shuxue,88 ... 阅读全文

posted @ 2015-02-23 16:36 tneduts 阅读(353) 评论(0) 推荐(0) 编辑

Sample MultipleFileWordcount CombineFileInputFormat

摘要： 在旧版本的samples中，使用的是旧的api，mapred下面的MultiFileInputFormat,现在已经过时。现在推荐使用mapreduce下面的CombineInputFormat来处理。应用场景： 如果文件数量大，而且单个文件又比较小，若是使用FileInputFormat进行分片... 阅读全文

posted @ 2015-02-23 09:25 tneduts 阅读(392) 评论(0) 推荐(0) 编辑

导航