2015年5月20日
hadoop distcp使用
摘要： 概述distcp（分布式拷贝）是用于大规模集群内部和集群之间拷贝的工具。 它使用Map/Reduce实现文件分发，错误处理和恢复，以及报告生成。 它把文件和目录的列表作为map任务的输入，每个任务会完成源列表中部分文件的拷贝。 由于使用了Map/Reduce方法，这个工具在语义和执行上都会有特殊的地... 阅读全文
posted @ 2015-05-20 14:22 stark_summer 阅读(481) 评论(0) 推荐(0) 编辑