会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
The BigData Things
导航
博客园
首页
新随笔
联系
订阅
管理
公告
2020年6月30日
HDFS存在大量小文件问题的解决方案
摘要: 一、小文件概述 小文件通常指文件大小要比HDFS块大小还要小很多的文件(在hadoop1.x版本的时候可以通过dfs.blocksize来设置,默认块大小为64M;在hadoop2.x版本的时候,则需要通过dfs.block.size设置,且默认大小为128M) 如果存在大量小文件,则会对整个存储系
阅读全文
posted @ 2020-06-30 21:46 八戒的悟空
阅读(2737)
评论(0)
推荐(0)
编辑