2014年9月19日

Hadoop、HBase、Hive整合安装文档

摘要: 前期准备(版本匹配):Hadoop 2.x is faster and includes features, such as short-circuit reads, which will help improve your HBase random read profile. Hadoop 2.x... 阅读全文

posted @ 2014-09-19 21:10 gaogf 阅读(2549) 评论(0) 推荐(0) 编辑

HDFS Federation和NameNode HA的搭建

摘要: 1. HDFS Federation产生背景 在Hadoop 1.0中,HDFS的单NameNode设计带来诸多问题,包括单点故障、内存受限制约集群扩展性和缺乏隔离机制(不同业务使用同一个NameNode导致业务相互影响)等,为了解决这些问题,Hadoop 2.0引入了基于共享存储的HA解决方案和H... 阅读全文

posted @ 2014-09-19 21:01 gaogf 阅读(2616) 评论(0) 推荐(0) 编辑

写在奋斗路上

摘要: 总见一些大牛们在博客上分享自己的学习心得和研究成果,自己在学习和工作过程中从他们的技术博客中也学到了很多的东西,于是自己也有了想把自己平时工作中用到的东西和遇到的问题解决方法写出了,一是为了给自己整理思路,做一个笔记,再者也是想跟同行们分享,避免走一些弯路。如果对您有帮助,顿感无比荣幸! 码字很辛... 阅读全文

posted @ 2014-09-19 20:50 gaogf 阅读(112) 评论(0) 推荐(0) 编辑

centos6.5(64bit)下编译hadoop-2.5.0

摘要: 编译环境准备:1、安装cmake:sudo wget http://www.cmake.org/files/v2.8/cmake-2.8.12.2.tar.gz#tar -zxvf cmake-2.8.12.2.tar.gz#cd cmake-2.8.12.2# ./configure#gmake#... 阅读全文

posted @ 2014-09-19 20:42 gaogf 阅读(201) 评论(0) 推荐(0) 编辑

导航