2020年3月12日
HDFS参数调优总结
摘要： HDFS参数调优总结 作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 一.DataNode参数调优 1>.dfs.blockreport.incremental.intervalMsec 如上图所示，官方的默认值是0,意思是当datanode新写一个块时，会立即汇报给namenod 阅读全文
posted @ 2020-03-12 23:34 JasonYin2020 阅读(2019) 评论(0) 推荐(0) 编辑
NameNode和DataNode工作原理剖析
摘要： NameNode和DataNode工作原理剖析 作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 一.DataNode的工作原理 1>.查看数据节点存储数据的目录 系统中的数据块的位置并不是由NameNode维护的，而是以块列表的形式存储在DataNode中。在系统的正常操作期间，N 阅读全文
posted @ 2020-03-12 21:24 JasonYin2020 阅读(683) 评论(0) 推荐(0) 编辑
NameNode和SecondaryNameNode工作原理剖析
摘要： NameNode和SecondaryNameNode工作原理剖析 作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 一.HDFS启动流程 1>.启动HDFS集群 关于集群的部署我这里就不罗嗦了，小白同学可以参考我之前的笔记。 启动HDFS集群，如下图所示，启动HDFS集群后，会自动生 阅读全文
posted @ 2020-03-12 01:02 JasonYin2020 阅读(548) 评论(0) 推荐(0) 编辑