随笔分类 -  Hadoop

摘要:一、HadoopHA的搭建:https://www.cnblogs.com/null-/p/10000309.html 二、pom文件依赖: 三、控制代码: 四、测试代码 阅读全文
posted @ 2018-12-05 19:56 wangchuanli 阅读(817) 评论(0) 推荐(0) 编辑
摘要:一、什么是Hive? Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。它架构在Hadoop之上,总归为大数据,并使得查询和分析方便。并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。术语“大数据”是大型数据集,其中包括体积庞大,高速,以及各种由与日俱 阅读全文
posted @ 2018-11-23 21:29 wangchuanli 阅读(215) 评论(0) 推荐(0) 编辑
摘要:一、Hadoop HA 机制的学习 1.1、Hadoop 2.X 的架构图 2.x版本中,HDFS架构解决了单点故障问题,即引入双NameNode架构,同时借助共享存储系统来进行元数据的同步,共享存储系统类型一般有几类,如:Shared NAS+NFS、BookKeeper、BackupNode 和 阅读全文
posted @ 2018-11-22 15:34 wangchuanli 阅读(422) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示