2020年1月12日
HDFS Maintenance State
摘要： 前言初一看文章标题，很多人可能比较奇怪“HD... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(343) 评论(0) 推荐(0) 编辑
继续聊聊HDFS BlockManager扩展性问题
摘要： 前言最近一段时间，笔者在业余时间继续对HDF... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(109) 评论(0) 推荐(0) 编辑
继续聊聊HDFS BlockManager扩展性问题
摘要： 前言最近一段时间，笔者在业余时间继续对HDF... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(219) 评论(0) 推荐(0) 编辑
HDFS小文件问题解决方案与启发实践
摘要： 前言继上文聊聊HDFS BlockManag... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(336) 评论(0) 推荐(0) 编辑
HDFS小文件问题解决方案与启发实践
摘要： 前言继上文聊聊HDFS BlockManag... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(308) 评论(0) 推荐(0) 编辑
聊聊HDFS BlockManager的服务化改造
摘要： 前言在现有的HDFS中，NameNode扮演... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(95) 评论(0) 推荐(0) 编辑
聊聊HDFS BlockManager的服务化改造
摘要： 前言在现有的HDFS中，NameNode扮演... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(132) 评论(0) 推荐(0) 编辑
DataNode生命线消息
摘要： 前言在HDFS中，我们都知道DataNode... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(157) 评论(0) 推荐(0) 编辑
HDFS内副本和块的状态分析
摘要： 前言在HDFS内，我们通常听到的最频繁的2个... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(509) 评论(0) 推荐(0) 编辑
2019年1月18日
工作中Hadoop,Spark,Phoenix,Impala 集群中遇到坑及解决方案
摘要： 1.HDFS 修复 问题描述：其他部门在yarn平台上跑spark 程序错误的生成了海量的不到100K的小文件，导致namenode压力过大，其中一个namenode宕机后，没有及时发现 使得edits文件大量积累，在namenode1宕机后，namenode2 随后在凌晨1点也宕机。 原因分析：N 阅读全文
posted @ 2019-01-18 12:22 回眸,境界 阅读(1390) 评论(0) 推荐(0) 编辑