会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
上海小墨子
博客园
首页
新随笔
联系
管理
订阅
2018年10月30日
hadoop hdfs问题集锦
摘要: 一:hadoop为什么不适合处理大量的小文件,怎么解决? 原因: 1:文件的元数据(包括文件被分成了哪些blocks,每个block存储在哪些服务器的哪个block块上),都是存储在namenode上的内存,会对namenode的内存造成压力; 2: 文件过多会造成文件的定位时间(又称寻址时间)增大
阅读全文
posted @ 2018-10-30 18:36 上海小墨子
阅读(645)
评论(0)
推荐(0)
编辑
公告