上一页 1 ··· 3 4 5 6 7 8 9 10 11 下一页

2017年8月30日

卸载CDH5.7

摘要: CDH5.7卸载1.记录用户数据目录2.关闭所有服务2.1在CM中,选择某个集群,然后停止集群。2.2逐个关闭CDH中的服务3.删除parcels4.删除集群5.卸载Cloudera manager server5.1 如果是用Cloudera-manager-installer.bin 文件安装5.2 如果非以上安装6.卸载Cloudera manager agent 和其管理的软件7.在主机上... 阅读全文

posted @ 2017-08-30 21:54 月饼馅饺子 阅读(736) 评论(0) 推荐(0) 编辑

CDH问题集

摘要: 1.在CM中添加主机报JDK错误手动在机器上安装oracle-jdk1.7+update64.然后在CM中选择不安装oracle-jdk即可.2.HostMoinitor无法与server联系查找了多方资料,依然没有找到问题./var/log/cloudera-scm-aget/下是日志文件/var/run/cloudera-scm-aget/是运行时文件最后从上面标黄色的地方感觉到是网络问题./... 阅读全文

posted @ 2017-08-30 21:54 月饼馅饺子 阅读(970) 评论(0) 推荐(0) 编辑

2.重新安装CM服务

摘要: 步骤1.停止CM服务2.删除CM服务3.添加CM服务4.测试数据库 步骤 1.停止CM服务 2.删除CM服务 没有发现可以单独删除某一项CM服务,必须全部删除 3.添加CM服务 4.测试数据库 如果报这个错误,把相关的jar包放在: /usr/share/java/mysql-connector-java.jar /usr/share/java/oracle-con... 阅读全文

posted @ 2017-08-30 21:53 月饼馅饺子 阅读(570) 评论(0) 推荐(0) 编辑

1.安装CDH5.12.x

摘要: 安装方式安装前准备安装步骤安装过程修改/etc/hosts设置ssh 互信修改linux 系统设置安装JDK1.8安装python2.7安装mysql/postgreysql数据库安装ntp设置本地yum源下载CDH parcels包安装CM使用yum安装CM安装agent进入CDH添加节点使用CM添加节点手动安装agent远程yum源安装节点服务安装中出现的问题 安装方式 CDH有三种安装方... 阅读全文

posted @ 2017-08-30 21:52 月饼馅饺子 阅读(2057) 评论(0) 推荐(0) 编辑

CDH组件目录\主机资源分配\端口

摘要: 目录:/var/log/cloudera-scm-installer : 安装日志目录。/var/log/* : 相关日志文件(相关服务的及CM的)。/usr/share/cmf/ : 程序安装目录。/usr/lib64/cmf/ : Agent程序代码。/var/lib/cloudera-scm-server-db/data : 内嵌数据库目录。/usr/bin/postgres : 内嵌数据库... 阅读全文

posted @ 2017-08-30 21:51 月饼馅饺子 阅读(1404) 评论(2) 推荐(0) 编辑

5.安装hbase

摘要: 下载安装包并解压设置hbase环境变量配置hbase-site.xml启动hbase检测hbase启动情况测试hbase shell 下载安装包并解压 https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/1.3.1/hbase-1.3.1-bin.tar.gz ….. [hbase@hadoop1 opt]$ tar -zxvf hbase-1.... 阅读全文

posted @ 2017-08-30 21:49 月饼馅饺子 阅读(322) 评论(0) 推荐(0) 编辑

4.安装hive

摘要: 下载安装包并解压安装元数据库配置hive添加hvie环境变量修改hive-env.sh修改hive配置文件初始化metastore使用hive cli配置hivemestore配置hiveserver2连接使用beeline服务器配置和客户端配置 本系列的前几篇目录都是快速安装环境,因为我在家需要一 阅读全文

posted @ 2017-08-30 21:47 月饼馅饺子 阅读(763) 评论(0) 推荐(0) 编辑

3.配置HDFS HA

摘要: 安装zookeeper下载zookeeper编辑zookeeper配置文件创建myid文件启动zookeeper配置HDFS HA配置手动HA配置自动HA启动HDFS HA namenode负责管理整个hdfs集群,如果namenode故障则集群将不可用.因此有必须实现namenode高可用. hdfs的高可用原理参考: HADOOP(二):hdfs 高可用原理 zookeeper简介: ... 阅读全文

posted @ 2017-08-30 21:46 月饼馅饺子 阅读(1254) 评论(0) 推荐(0) 编辑

1.linux环境配置

摘要: 首先说一下,这里是虚拟机环境. 1.用vbox安装centos6.8-mini 注意不要使用复制的方式安装,复制的虚拟机网络不通 安装如下: 主机 ip 角色 内存 hadoop1 192.168.0.10 namenode,HMASTER 2G hadoop2 192.168.0.11 namenode,HiverServer2... 阅读全文

posted @ 2017-08-30 21:45 月饼馅饺子 阅读(327) 评论(0) 推荐(0) 编辑

2.安装hdfs yarn

摘要: 下载hadoop压缩包设置hadoop环境变量设置hdfs环境变量设置yarn环境变量设置mapreduce环境变量修改hadoop配置设置core-site.xml设置hdfs-site.xml设置yarn-site.xml设置mapred-site.xml设置slave文件分发配置启动hdfs格式化namenode启动hdfs检查hdfs启动情况启动yarn测试mr任务hadoop本地库hdf... 阅读全文

posted @ 2017-08-30 21:45 月饼馅饺子 阅读(651) 评论(0) 推荐(0) 编辑

上一页 1 ··· 3 4 5 6 7 8 9 10 11 下一页

导航