随笔分类 -  大数据

大数据
Hadoop HA（高可用搭建）
摘要：上次记录了 "hadoop完全分布式搭建（非高可用）" ，这次来学习hadoop HA 搭建。 一、原理机制 主备NameNode 解决单点故障（属性，位置） 主NameNode对外提供服务，备NameNode同步主NameNode元数据，以待切换 所有DataNode同时向两个NameNode汇报 阅读全文
posted @ 2019-06-30 21:31 厨房有只偷吃的猫 阅读(3607) 评论(0) 推荐(0) 编辑
hadoop完全分布式搭建（非高可用）
摘要：一、准备工作 1.新建虚拟机 固定ip NAT、固定主机名 新建虚拟机： "VMware安装Linux详细教程" 2.关闭防火墙 or 暴露端口 3.必要软件 JDK、Hadoop 4.而配置ssh无密码登录 [每台节点都需要生成] 5.配置NTP，使得集群间的时间同步(非必须) 安装 NTP： 修 阅读全文
posted @ 2019-06-16 11:14 厨房有只偷吃的猫 阅读(1639) 评论(0) 推荐(0) 编辑