hive 表迁移

1.hive表迁移

#!/bin/bash
#set -x
 
DB=$1
#获取hive表定义
ret=$(hive -e 'use ${DB};show tables;'|grep -v _es|grep -v _hb|grep -v importinfo)
 
for tem in $ret;
do
    hive -e "use ${DB};show create table $tem" >> /tmp/secha.sh
    echo -e ';\c' >> /tmp/secha.sh
done
#需要将脚本里面的hdfs的路径换一下
#拿到新集群上执行
 
#迁移hive的表数据
ret=$(hive -e 'use ${DB};show tables;'|grep -v _es|grep -v _hb|grep -v importinfo)
 
for tem in $ret;
do
    hadoop distcp hdfs://192.168.5.11:8020/user/hive/warehouse/${DB}/$ret hdfs://192.168.3.21:8020/user/hive/warehouse/${DB}/$ret
    #执行 msck repair table ods_mall_mall_store 需要测试
done
posted @ 2021-07-24 14:49  monkey66  阅读(295)  评论(0编辑  收藏  举报