|NO.Z.00004|——————————|^^ 部署 ^^|——|Hadoop&Hive.V04|——|Hive.v04|Hive部署配置.v01|
一、Hive安装配置
~~~ [安装mysql数据库]
~~~ [Hive的安装与配置]
~~~ [Hive安装的注意事项]
~~~ [Hive参数配置和命令]
### --- 环境准备
~~~ Hive官网:http://hive.apache.org
~~~ 下载网址:http://archive.apache.org/dist/hive/
~~~ 文档网址:https://cwiki.apache.org/confluence/display/Hive/LanguageManual
~~~ # 安装前提:3台虚拟机,安装了Hadoop
~~~ 安装软件:Hive(2.3.7) + MySQL (5.7.26)
~~~ # 备注:Hive的元数据默认存储在自带的 derby 数据库中,生产中多采用MySQL
~~~ derby:java语言开发占用资源少,单进程,单用户。仅仅适用于个人的测试。
软件 | linux121 | linux122 | linux123 |
Hadoop | √ | √ | √ |
mysql | √ | ||
hive | √ |
### --- 资源规划
~~~ # hive安装包
apache-hive-2.3.7-bin.tar.gz
~~~ # MySQL安装包
mysql-5.7.26-1.el7.x86_64.rpm-bundle.tar
~~~ # MySQL的JDBC驱动程序
mysql-connector-java-5.1.46.jar
~~~ # 整体的安装步骤:
~~~ 安装MySQL
~~~ 安装配置Hive
~~~ Hive添加常用配置
二、mysql安装
### --- mysql安装
~~~ Hive中使用MySQL存储元数据,MySQL的版本 5.7.26。安装步骤:
~~~ 环境准备(删除有冲突的依赖包、安装必须的依赖包)
~~~ 安装MySQL
~~~ 修改root口令(找到系统给定的随机口令、修改口令)
~~~ 在数据库中创建hive用户
### --- 删除MariaDB
~~~ centos7.6自带的 MariaDB(MariaDB是MySQL的一个分支),与要安装的MySQL有冲突,需要删除。
~~~ # 查询是否安装了mariadb
[root@linux123 ~]# rpm -aq | grep mariadb
mariadb-libs-5.5.60-1.el7_5.x86_64
~~~ # 删除mariadb。-e 删除指定的套件;--nodeps 不验证套件的相互关联性
[root@linux123 ~]# rpm -e --nodeps mariadb-libs
### --- 安装依赖
[root@linux123 ~]# yum install perl -y
[root@linux123 ~]# yum install net-tools -y
### --- 安装MySQL
~~~ # 解压缩
[root@linux123 software]# tar xvf mysql-5.7.26-1.el7.x86_64.rpm-bundle.tar
~~~ # 依次运行以下命令
rpm -ivh mysql-community-common-5.7.26-1.el7.x86_64.rpm
rpm -ivh mysql-community-libs-5.7.26-1.el7.x86_64.rpm
rpm -ivh mysql-community-client-5.7.26-1.el7.x86_64.rpm
rpm -ivh mysql-community-server-5.7.26-1.el7.x86_64.rpm
### --- 启动数据库
[root@linux123 mysql5.7]# systemctl start mysqld
### --- 查找root密码
[root@linux123 mysql5.7]# grep password /var/log/mysqld.log
2021-08-20T13:44:27.423925Z 1 [Note] A temporary password is generated for root@localhost: Q*6aUssg_6__
### --- 修改 root 口令
~~~ # 进入MySQL,使用前面查询到的口令
[root@linux123 mysql5.7]# mysql -u root -p
Enter password:
~~~ # 设置口令强度;将root口令设置为12345678;刷新
~~~ validate_password_policy 密码策略(默认是1),可配置的值有以下:
~~~ 0 or LOW 仅需需符合密码长度(由参数validate_password_length【默认为8】指定)
~~~ 1 or MEDIUM 满足LOW策略,同时还需满足至少有1个数字,小写字母,大写字母和特殊字符
~~~ 2 or STRONG 满足MEDIUM策略,同时密码不能存在字典文件(dictionaryfile)中
~~~ 备注:个人开发环境,出于方便的目的设比较简单的密码;生产环境一定要设复杂密码!
mysql> set global validate_password_policy=0;
mysql> set password for 'root'@'localhost' =password('12345678');
mysql> flush privileges;
### --- 创建hive用户
~~~ # 创建用户设置口令、授权、刷新
mysql> CREATE USER 'hive'@'%' IDENTIFIED BY '12345678';
mysql> GRANT ALL ON *.* TO 'hive'@'%';
mysql> FLUSH PRIVILEGES;
Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart
——W.S.Landor
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
· 别再用vector<bool>了!Google高级工程师:这可能是STL最大的设计失误
· 单元测试从入门到精通