2015年10月24日
Hadoop HDFS copyMergeFromLocal
摘要： 在谈到HDFS优化中，其中HDFS擅长处理大文件，而对于小文件常用的优化策略有压缩合并。在此列举小文件合并工具类供参考。/*** Get all the files in the directories that match the source file patte... 阅读全文
posted @ 2015-10-24 22:49 写昵称不如写代码 阅读(183) 评论(0) 推荐(0) 编辑
Hadoop HDFS copyMergeFromLocal
摘要： 在谈到HDFS优化中，其中HDFS擅长处理大文件，而对于小文件常用的优化策略有压缩合并。在此列举小文件合并工具类供参考。/*** Get all the files in the directories that match the source file patte... 阅读全文
posted @ 2015-10-24 22:49 写昵称不如写代码 阅读(451) 评论(0) 推荐(0) 编辑