2015年11月24日

记一次hadoop datanode进程问题分析

摘要： 症状：datanode进程还在，但是在web ui接口发现该节点已经被置为dead节点。监测datanode进程日志，开始时一直狂刷很忙，后来停止刷新日志。分析datanode进程日志，发现如下一些错误：datanode.DataNode: PacketResponder java.io.IOExc... 阅读全文

posted @ 2015-11-24 16:52 tneduts 阅读(2635) 评论(0) 推荐(0) 编辑

关于HADOOP HA 中DFSZKFC的理解

摘要： [转自uc技术博客：http://tech.uc.cn/?p=252]FC是要和NN一一对应的，两个NN就要部署两个FC。它负责监控NN的状态，并及时的把状态信息写入ZK。它通过一个独立线程周期性的调用NN上的一个 特定接口来获取NN的健康状态。FC也有选择谁作为Active NN的权利，因为最多只... 阅读全文

posted @ 2015-11-24 16:44 tneduts 阅读(534) 评论(1) 推荐(0) 编辑

导航