2018年9月11日
spark + hive
摘要： 1.如何让 spark-sql 能够访问hive？ 只需将hive-site.xml 放到 spark/conf 下即可，hive-site.xml 内容请参照hive集群搭建 2.要在spark 代码中使用sql操作hive，需要在初始化sparksession 时加上 3.spark开启hive 阅读全文
posted @ 2018-09-11 11:12 生心无住 阅读(1108) 评论(0) 推荐(0) 编辑
hive 集群搭建
摘要： 软件环境：centos7 + hadoop2.7.6 1.hive 下载 apache-hive-2.1.0-bin.tar.gz 2.copy apache-hive-2.1.0-bin.tar.gz 到/user/local 目录并解压 3.安装msyql 授权root 可以远程登陆mysql 阅读全文
posted @ 2018-09-11 00:22 生心无住 阅读(619) 评论(0) 推荐(0) 编辑