随笔分类 -  Hive

摘要:未被external修饰的是内部表(managed table),被external修饰的为外部表(external table); 区别: 内部表数据由Hive自身管理,外部表数据由HDFS管理; 内部表数据存储的位置是hive.metastore.w... 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(26) 评论(0) 推荐(0) 编辑
摘要:Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D 修改hive-site.xml文件 hive.exec.local.scratchdir ... 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(27) 评论(0) 推荐(0) 编辑
摘要:HIVE进阶学习笔记 1、load加载数据 1、语法:local本地路径,没有则是默认读取HDFS文件路径,partition数据存储到分区表内 load data [local] inpath 'filepath' [overwrit... 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(21) 评论(0) 推荐(0) 编辑
摘要:系统识别不出某个字符,所以只要改为系统能够识别的就好了,一般是“&",有问题改为“&"就好 < 大于号 & & and字符 ' ' 单引号 " " 双引号 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(3) 评论(0) 推荐(0) 编辑
摘要:HIVE学习笔记 1、创建表 create table emp( id int, name string, gender string ) ... 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(9) 评论(0) 推荐(0) 编辑
摘要:因为db.lck的所属权限问题造成的 发现db.lck属于root:root所以报错,改动例如以下: chown -R artifactory:artifactory db.lck 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(56) 评论(0) 推荐(0) 编辑
摘要:将hive-site.xml文件中的${system:java.io.tmpdir}替换为hive的临时目录 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(79) 评论(0) 推荐(0) 编辑
摘要:修改后重新进入hive,正常 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(9) 评论(0) 推荐(0) 编辑
摘要:两个jar包,删除一个即可 阅读全文
posted @ 2022-05-29 08:31 田领群 阅读(12) 评论(0) 推荐(0) 编辑
摘要:hive-site.xml 登录mysql 使用hive配置的数据库(见上图) select * from COLUMNS_V2; alter table COLUMNS_V2 modify column COMMENT varchar(256) cha... 阅读全文
posted @ 2022-05-29 08:30 田领群 阅读(6) 评论(0) 推荐(0) 编辑
摘要:hive报错:Error: Error while compiling statement: FAILED: HiveAccessControlException Permission denied: user [admin] does not have [U... 阅读全文
posted @ 2022-05-29 08:30 田领群 阅读(91) 评论(0) 推荐(0) 编辑
摘要:十二、 sqoop 将 MySQL 数据导⼊ Hive 1、 将 ambari.users 表导入到 dim_v8sp 数据库在 client-v01 服务器创建 etl 用户 HOME目录,生成kerberos票据文件,并添加 crontab以定期刷新飘... 阅读全文
posted @ 2022-05-29 08:30 田领群 阅读(13) 评论(0) 推荐(0) 编辑
摘要:1、节点说明 1.2 ambari.tianlingqun.com 主要用于 Ambari管理( ambari-server ) 用于存放元数据的MySQL数据库也安装到该节点(元数据主要包括:Ambari, Hive, Ranger, Hue, A... 阅读全文
posted @ 2022-05-29 08:30 田领群 阅读(156) 评论(0) 推荐(0) 编辑
摘要:1、创建文件目录 mkdir -p /DATA/disk1/software/mysql/; cd /DATA/disk1/software/mysql/; 2、下载mysql5.7包 wget https://cdn.mysql.com/archives/m... 阅读全文
posted @ 2022-05-29 08:30 田领群 阅读(97) 评论(0) 推荐(0) 编辑
摘要:1、安装包准备 mkdir -p /var/www/html/cloudera-repos; cd /var/www/html/cloudera-repos/; wget https://archive.cloudera.com/cm6/6.3.1/redha... 阅读全文
posted @ 2022-05-29 08:30 田领群 阅读(105) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示