摘要: 因项目需要,需要搭建一个cloudera集群,由于项目分工不同,之前一直有运维同学负责cloudera运维升级问题,本人平时只是跑跑作业,这是首次自己搭建cloudera集群。 由于运维同学提供的cloudera 安装文档版本为 5.9,所以就选择安装5.9版本,安装过程中主要参考了 “破击手”写的 阅读全文
posted @ 2019-09-06 11:44 致橡树 阅读(419) 评论(0) 推荐(0) 编辑
摘要: 1、修改 mysql 配置文件 /etc/my.cnf ,添加配置项 2、重启 mysql 服务 3、如果 mysql 已经创建 hive、oozie、hue 数据库,需要删除重新创建 接着又出现新的异常问题 然后按照各种方法排查问题: 1、配置 mysql 连接信息到 /etc/hive/conf 阅读全文
posted @ 2019-09-04 13:53 致橡树 阅读(445) 评论(0) 推荐(0) 编辑
只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2019-09-03 15:19 致橡树 阅读(1) 评论(0) 推荐(0) 编辑
摘要: 环境准备: linux版本:centos 7.2 mysql版本:mysql-5.7.27-linux-glibc2.12-x86_64 部署节点:主从各一台节点 1、下载 https://dev.mysql.com/downloads/mysql/5.7.html#downloads 2、解压 t 阅读全文
posted @ 2019-08-26 18:02 致橡树 阅读(389) 评论(0) 推荐(0) 编辑
摘要: git bash 操作步骤方法一: 1、新建一个文件夹,鼠标右键运行:Git Bash Here 打开命令窗口; 2、git init 初始化生成 .git文件; 3、git remote add origin https://github.com/projects.git 为远程仓库地址创建别名; 阅读全文
posted @ 2018-07-13 17:08 致橡树 阅读(3338) 评论(0) 推荐(1) 编辑
摘要: 先上代码: pom.xml配置: 异常日志: 问题分析: spark-streaming-kafka 与 kafka版本问题:spark1.6依赖kafka:0.8.2.1,修改pom.xml配置 阅读全文
posted @ 2018-04-25 10:40 致橡树 阅读(1928) 评论(0) 推荐(0) 编辑
摘要: 异常信息: java.lang.RuntimeException: redis.clients.jedis.exceptions.JedisConnectionException: Unexpected end of stream. at backtype.storm.utils.Disruptor 阅读全文
posted @ 2017-06-22 09:35 致橡树 阅读(5452) 评论(1) 推荐(0) 编辑
摘要: %d{yyyy-MM-dd HH:mm:ss.SSS} %c{1.} [%p] %msg%n %msg%n %d %-8r %m%n ${pattern} ... 阅读全文
posted @ 2017-05-10 15:03 致橡树 阅读(1772) 评论(0) 推荐(0) 编辑
摘要: ####################################################################################historyUSER_IP=$(who am i 2>/dev/null | awk '{print $NF}' | sed -e 阅读全文
posted @ 2016-12-24 10:34 致橡树 阅读(1112) 评论(0) 推荐(0) 编辑
摘要: HBase 集群安装 1.上传tar包,解压tar包 tar -zxvf hbase-1.1.5-bin.tar.gz 2.修改配置文件 进入 hbase/conf/ 在文件 regionservers 加入集群主机名 在hbase-site.xml加入以下信息 <configuration><pr 阅读全文
posted @ 2016-12-20 22:31 致橡树 阅读(184) 评论(0) 推荐(0) 编辑