2012年4月1日

hadoop 集群间数据迁移

摘要: hadoop集群之间有时候需要将数据进行迁移,如将一些保存的过期文档放置在一个小集群中进行保存。 使用的是社区提供的功能,distcp。用法非常简单: hadoop distcp hdfs://nn1:8020/foo/bar hdfs://nn2:8020/bar/foo 加上参数 -i 表示不用去管failure -m 设置map数 阅读全文

posted @ 2012-04-01 11:23 萌@宇 阅读(1960) 评论(0) 推荐(1) 编辑

导航