Hadoop 2.8 +Mysql 搭建Hive2.x.x
安装mysql (ubuntu):
sudo apt-get install mysql-server
去 https://dev.mysql.com/downloads/connector/j/ 下载mysql的java驱动放到hive的lib目录里去
如果是deb安装包的话,装完后, 一般jar文件会被放在例如/usr/share/java/mysql-connector-java-8.0.11.jar
hive配置文件 conf/hive-site.xml
<configuration>
<property>
<name>hive.metastore.local</name>
<value>true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://127.0.0.1:3306/hive?useSSL=false</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.cj.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>hive</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>mysql</value>
</property>
</configuration>
1. MySQL的链接字符串要加 useSSL=false
2. hive.downloaded.resources.dir 这个配置项一定要当心, 退出hive时会清空这个目录
3. 新的jdbc驱动jdbc.driver的属性值从com.mysql.jdbc.Driver
换为com.mysql.cj.jdbc.Driver
.
4 &符号在XML的转义是&
在Mysql中创建metastore:
从hive2.0开始要执行hive bin目录下的schematool来创建metastore(别忘了现在mysql中create database)
./schematool -dbType mysql -initSchema
环境变量:
在/etc/source确保有如下环境变量(根据实际情况调整路径):
export HADOOP_HOME=/home/rav009/hadoop-2.8.0
export PATH=$HADOOP_HOME/bin/:$PATH
export HIVE_HOME=~/hive/apache-hive-2.x.x-bin
export PATH=$HIVE_HOME/bin:$PATH
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· AI与.NET技术实操系列:基于图像分类模型对图像进行分类
· go语言实现终端里的倒计时
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 25岁的心里话
· 闲置电脑爆改个人服务器(超详细) #公网映射 #Vmware虚拟网络编辑器
· 零经验选手,Compose 一天开发一款小游戏!
· 通过 API 将Deepseek响应流式内容输出到前端
· AI Agent开发,如何调用三方的API Function,是通过提示词来发起调用的吗