2018 年 9月 30 日随笔档案 - 梅花GG

2018年9月30日

摘要：问题描述: 上一篇就是NameNode 的HA 部署完成，但是存在问题，问题是如果主NameNode的节点宕机了，还是需要人工去使用命令来切换NameNode的Acitve 这样很不方便，所以这篇学习笔记就是记录如何解决故障转移的启动以后每个都是Standby，选举一个为Active 监控阅读全文

posted @ 2018-09-30 23:45 梅花GG 阅读(990) 评论(0) 推荐(0) 编辑

【Hadoop 分布式部署十：配置HDFS 的HA、启动HA中的各个守护进程】

摘要：官方参考配置地址：http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWithQJM.html 一、在Hadoop-senior.zuoyan.com 的主机上首先阅读全文

posted @ 2018-09-30 22:20 梅花GG 阅读(1488) 评论(0) 推荐(0) 编辑

【Hadoop 分布式部署九：分布式协作框架Zookeeper架构分布式安装部署】

摘要： 1.首先将运行在本地上的 zookeeper 给停止掉 2.到/opt/softwares 目录下将 zookeeper解压到 /opt/app 目录下命令: tar -zxvf zookeeper-3.4.5.tar.gz -C /opt/app/ 3.修改配置文件将文件 zoo_sampl 阅读全文

posted @ 2018-09-30 13:09 梅花GG 阅读(158) 评论(0) 推荐(0) 编辑

【Hadoop 分布式部署八：分布式协作框架Zookeeper架构功能讲解及本地模式安装部署和命令使用】

摘要： What is Zookeeper 是一个开源的分布式的，为分布式应用提供协作服务的Apache项目提供一个简单的原语集合，以便与分布式应用可以在他之上构建更高层次的同步服务设计非常简单易于编程，他使用的是类似于文件系统那样的树形数据结构。目的就是将分布式服务不再需要有协作冲突而另外实现协作服阅读全文

posted @ 2018-09-30 11:34 梅花GG 阅读(159) 评论(0) 推荐(0) 编辑

【Hadoop 分布式部署七：使用ntp配置内网中集群机器时间同步】

摘要：集群的时间要同步，如果时间不同步，会出现很多问题。找一台机器做时间服务器所有的机器与这台机器的时间进行定时的同步比如，每日十分钟同步一次我们这里使用 hadoop-senior.zuoyan.com 这台主机作为时间服务器首先检查一下主机是否安装ntp服务使用命令： rpm -qa | 阅读全文

posted @ 2018-09-30 10:42 梅花GG 阅读(225) 评论(0) 推荐(0) 编辑

【Hadoop 分布式部署六：环境问题解决和集群基准测试】

摘要：环境问题：出现Temporary failure in name resolutionp-senior-zuoyan.com 的原因有很多，主要就是主机没有解析到，那就在hadoop的slaves 配置文件中重新写一下主机名如果还是没有成功启动，就将slaves 文件删除，然后重新创建，可能阅读全文

posted @ 2018-09-30 09:54 梅花GG 阅读(138) 评论(0) 推荐(0) 编辑

梅花GG

公告