07 2019 档案

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. Current transaction manager does not support explicit lock requests. Transaction manager:
摘要：操作系统：CentOS Linux release 7.4.1708 (Core) 研发环境 软件环境：cdh5.15.1 开启了事务认证 记录时间：20190729 1、查看是否有表被锁： show locks show locks table_name 2、#解决办法 unlock table 阅读全文
posted @ 2019-07-30 10:58 bioamin 阅读(1204) 评论(0) 推荐(0)
cdh hive开启事物机制
摘要：操作系统：CentOS Linux release 7.4.1708 (Core) 研发环境 软件环境：cdh5.15.1 记录时间：20190729 修改hive的配置参数，使其支持行级insert、update、delete操作 服务端： hive-site.xml 的 Hive 服务高级配置代 阅读全文
posted @ 2019-07-30 10:34 bioamin 阅读(876) 评论(0) 推荐(0)
hive数据迁移 从apache2.x迁移到cdh hive 1.x
摘要：迁移背景： 1、hive有30多个库，最大的库有100多张表，这中情况下必须采用 脚本式 迁移 2、2个hive版本不一致，元数据mysql表结构不一致，不能采用mysql数据库覆盖方式 3、hive数据仓库只迁移一部分，另外一部分后续迁移，不能采用mysql数据库覆盖方式 4. 2个集群暂时未开启 阅读全文
posted @ 2019-07-24 10:50 bioamin 阅读(581) 评论(0) 推荐(0)