百里登风

导航

2017年9月25日

HDFS操作及小文件合并

摘要: 小文件合并是针对文件上传到HDFS之前 这些文件夹里面都是小文件 参考代码 最后一点,分清楚hadoop fs 和dfs的区别 FS涉及可以指向任何文件系统(如本地,HDFS等)的通用文件系统。因此,当您处理不同的文件系统(如本地FS,HFTP FS,S3 FS等)时,可以使用它 dfs非常具体到H 阅读全文

posted @ 2017-09-25 12:00 百里登峰 阅读(16464) 评论(0) 推荐(0) 编辑