2017年11月13日

Datanode下线对集群带宽影响

摘要： 背景介绍 在hadoop集群中，当一个datanode发生故障（宕机，进程被kill，网络不通等）时，namenode在一定时间内（默认10分30秒）无法收到该datanode的心跳信息，就会将该datanode从集群中下线。这样带来的影响是，保存在这台datanode上的所有block副本就需要复 阅读全文

posted @ 2017-11-13 20:47 gentleman_hai 阅读(812) 评论(0) 推荐(1) 编辑

hadoop fsck详解

摘要： 我们知道fsck是用来检测hdfs上文件、block信息的，但是fsck输出的结果我们是否能看明白呢？ 下面我们来看一个fsck输出的结果 hadoop fsck / ########################## 情况一 #################### Status: HEALTH 阅读全文

posted @ 2017-11-13 17:26 gentleman_hai 阅读(10147) 评论(0) 推荐(0) 编辑

hadoop Non DFS Used是什么

摘要： 首先我们先来了解一下Non DFS User是什么？ Non DFS User的意思是：非hadoop文件系统所使用的空间，比如说本身的linux系统使用的，或者存放的其它文件 它的计算公式： non dfs used = configured capacity - remaining space 阅读全文

posted @ 2017-11-13 15:02 gentleman_hai 阅读(2539) 评论(0) 推荐(0) 编辑

导航