2020年5月17日
Spark连接Hive的metastore异常
摘要： 不过有时候我们在创建SQLContext实例的时候遇到类似下面的 java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.Sess 阅读全文
posted @ 2020-05-17 19:38 彬在俊 阅读(2258) 评论(0) 推荐(0) 编辑
spark 提交任务学习
摘要： 提交命令 --class 任务的包名全路径 spark-submit --name sparksql --class com.binzaijun.SQLContextApp --master local[2] sql-1.0-SNAPSHOT.jar people.json spark-submit 阅读全文
posted @ 2020-05-17 17:01 彬在俊 阅读(222) 评论(0) 推荐(0) 编辑
CDH6.3.1 安装文档
摘要： 一、环境准备 1.1硬件：centos7.6 2.1软件： jdk1.8 mysql5.7 MySQL JDBC jar cm6.3.1 连接：https://archive.cloudera.com/cm6/6.3.1/repo-as-tarball/cm6.3.1-redhat7.tar.gz 阅读全文
posted @ 2020-05-17 14:31 彬在俊 阅读(1034) 评论(0) 推荐(0) 编辑
Linux 强制安装 rpm 包
摘要： Linux 正常安装 rpm 的命令是： rpm -ivh xxx.rpm 重复安装时需加属性： 软件包重复安装将会失败，若仍需要安装必须加 --replacepkgs 属性 软件包的某个文件已在安装其他软件包时安装过，则安装将会失败，若仍需要安装必须加 --replacefiles 属性 解决依赖 阅读全文
posted @ 2020-05-17 13:16 彬在俊 阅读(1425) 评论(0) 推荐(0) 编辑