01 2014 档案

摘要：马年的大年初一快要过去了，给亲戚朋友也已经拜过年了，2013年真的过去了。也许是自己又长了一岁的原因，现在有了很多的感触，想写下来。那就写下来吧。 女儿篇 最令我兴奋的是女儿——缘宝。她到今年5月份就三周岁了。想一想刚出生时带有血迹的样子，再看看现在蹦蹦跳跳的样子，孩子长的太快了。因为工作的原因，缘宝大部分时间是和姥姥姥爷在一起的。在爸爸妈妈身边，也就最近半年多的时间。刚开始，经常为她会学会... 阅读全文

摘要：简介 hadoop2的中的MapReduce不再是hadoop1中的结构已经没有了JobTracker，而是分解成ResourceManager和ApplicationMaster。这次大变革被称为MRv2或者YARN，是一次革命性的变化。 配置 在前面的文章中，我们配置了hadoop2集群的HA高可靠，下面紧接上前面的配置，设置MapReduce的配置信息，也是最简单最容易上手的。 修... 阅读全文

摘要：简介hadoop中的NameNode好比是人的心脏，非常重要，绝对不可以停止工作。在hadoop1时代，只有一个NameNode。如果该NameNode数据丢失或者不能工作，那么整个集群就不能恢复了。这是hadoop1中的单点问题，也是hadoop1不可靠的表现，如图1所示。hadoop2就解决了这个问题。图1hadoop2.2.0中HDFS的高可靠指的是可以同时启动2个NameNode。其中一个处于工作状态，另一个处于随时待命状态。这样，当一个NameNode所在的服务器宕机时，可以在数据不丢失的情况下，手工或者自动切换到另一个NameNode提供服务。这些NameNode之间通过共享数据， 阅读全文