NWNU-Sun | 技术沉思录

代码是诗,bug是谜

   ::  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理
  77 随笔 :: 49 文章 :: 6 评论 :: 40763 阅读

文章分类 -  大数据 / ozone

摘要:背景 ​ HDFS通过把文件系统元数据全部加载到数据节点Namenode内存中,给客户端提供了低延迟的元数据访问。 ​ 由于元数据需要全部加载到内存,所以一个HDFS集群能支持的最大文件数,受Java堆内存的限制,上限大概是4亿~5亿个文件。所以HDFS适合大量大文件[几百兆字节(MB)以上]的集群 阅读全文
posted @ 2023-11-26 12:07 匿名者nwnu 阅读(241) 评论(2) 推荐(1) 编辑

点击右上角即可分享
微信分享提示