2015年4月15日
Hadoop异常处理 Bad connect ack with firstBadLink (No route to host )
摘要： [root@Node1 ~]# hdfs dfs -put /home/test.txt /lab/input15/04/15 17:29:44 INFO hdfs.DFSClient: Exception in createBlockOutputStreamjava.io.IOException:... 阅读全文
posted @ 2015-04-15 17:32 JackyKen 阅读(2630) 评论(0) 推荐(0) 编辑
YARN应用场景、原理与资源调度
摘要： 1.Hadoop YARN产生背景 源于MapReduce1.0 运维成本 如果采用“一个框架一个集群”的模式，则可能需要多个管理员管理这些集群，进而增加运维成本，而共享模式通常需要少数管理员即可完成多个框架的统一管理。 数据共享 随着数据量的暴增，跨集群间的数据移动不仅需花费更长的时间，且硬... 阅读全文
posted @ 2015-04-15 09:58 JackyKen 阅读(1160) 评论(0) 推荐(0) 编辑