随笔分类 - Hadoop
摘要:一、HadoopHA的搭建:https://www.cnblogs.com/null-/p/10000309.html 二、pom文件依赖: 三、控制代码: 四、测试代码
阅读全文
摘要:一、什么是Hive? Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。它架构在Hadoop之上,总归为大数据,并使得查询和分析方便。并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。术语“大数据”是大型数据集,其中包括体积庞大,高速,以及各种由与日俱
阅读全文
摘要:一、Hadoop HA 机制的学习 1.1、Hadoop 2.X 的架构图 2.x版本中,HDFS架构解决了单点故障问题,即引入双NameNode架构,同时借助共享存储系统来进行元数据的同步,共享存储系统类型一般有几类,如:Shared NAS+NFS、BookKeeper、BackupNode 和
阅读全文