2017年7月9日
HDFS HA 的 core-site.xml
摘要： <! Licensed under the Apache License, Version 2.0 (the "License"); you may not use this file except in compliance with the License. You may obtain a c 阅读全文
posted @ 2017-07-09 23:50 岑忠满 阅读(318) 评论(0) 推荐(0) 编辑
HDFS HA 的 hdfs-site.xml
摘要： <! Licensed under the Apache License, Version 2.0 (the "License"); you may not use this file except in compliance with the License. You may obtain a c 阅读全文
posted @ 2017-07-09 23:49 岑忠满 阅读(395) 评论(0) 推荐(0) 编辑
HDFS HA(High Availability)高可用性
摘要： HDFS HA(High Availability)高可用性 参考文献： "官方文档" "全文翻译" "Hadoop组件之 HDFS(HA实现细节)" 这张图片的个人理解 由于NameNode在Hadoop1只有一个节点，可能存在(SPOF)single point of file单节点故障。包括机 阅读全文
posted @ 2017-07-09 18:33 岑忠满 阅读(561) 评论(0) 推荐(0) 编辑
Zookeeper的安装
摘要： 伪分布式安装 1.下载ZooKeeper 2.创建数据文件目录 $ mkdir p data/zkData 3.编辑配置文件 $ vim conf/zoo.cfg dataDir=/opt/softwares/zookeeper 3.4.9/data/zkData 4.启动ZookeeperServ 阅读全文
posted @ 2017-07-09 16:34 岑忠满 阅读(175) 评论(0) 推荐(0) 编辑
什么是Zookeeper
摘要： "官方文档" ZooKeeper: A Distributed Coordination Service for Distributed Applications ZooKeeper:一个开源的分布式的，为分布式应用提供协调服务的应用 ZooKeeper is a distributed, open 阅读全文
posted @ 2017-07-09 15:36 岑忠满 阅读(351) 评论(0) 推荐(0) 编辑
Hadoop集群时间同步
摘要： 1.安装ntp服务 $ sudo apt get install ntp 2.修改配置文件 参考 "配置NTP服务ntpd/ntp.conf（搭建Hadoop集群可参考）" $ vim /etc/ntp.conf 配置客户端的授权，也就是给指定的机器（客户端）设置访问NTP Server的权限，这是 阅读全文
posted @ 2017-07-09 13:53 岑忠满 阅读(2113) 评论(0) 推荐(0) 编辑
Hadoop学习笔记
摘要： Hadoop生态系统图解 " " 什么是Hadoo " " hdfs文件系统架构详解 " " YARN框架详解 " " MapReduce执行流程及程序编写 " " Hadoop本地安装 " " 安装配置文件解析 " " Hadoop三种启动方式 " " Hadoop开发 " " Maven搭建Ha 阅读全文
posted @ 2017-07-09 11:36 岑忠满 阅读(245) 评论(0) 推荐(0) 编辑