随笔 - 321  文章 - 0  评论 - 6  阅读 - 34万

hive cli转hive beeline的几个例子

#COMMAND="hive -i settings/load-${SCHEMA_TYPE}.sql -f ddl-tpch/bin_${SCHEMA_TYPE}/${t}.sql \
# -d DB=${DATABASE} \
# -d SOURCE=tpch_text_${SCALE} -d BUCKETS=${BUCKETS} \
# -d SCALE=${SCALE} -d REDUCERS=${REDUCERS} \
# -d FILE=orc"

sql解释:先把settings/load-${SCHEMA_TYPE}.sql里对hive的设置初始化,然后根据传参执行ddl-tpch/bin_${SCHEMA_TYPE}/${t}.sql中的sql语句

将上面cli方式转成beeline的方式

COMMAND="beeline -u 'jdbc:hive2://xxxxxx:36003/xxxxx;principal=hive/_HOST@xxxxx' -i settings/load-${SCHEMA_TYPE}.sql --hiveconf DB=${DATABASE} --hiveconf SOURCE=tpch_text_${SCALE} --hivevar BUCKETS=${BUCKETS} --hiveconf SCALE=${SCALE} --hivevar REDUCERS=${REDUCERS} --hiveconf FILE=orc -f ddl-tpch/bin_${SCHEMA_TYPE}/${t}.sql"

这里传参我用了hiveconf,实际用hivevar更合适

hiveconf和hivevar的区别:https://www.cnblogs.com/to-here/p/14868519.html

posted on   该用户很懒  阅读(107)  评论(0编辑  收藏  举报
编辑推荐:
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
阅读排行:
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· SQL Server 2025 AI相关能力初探
· AI编程工具终极对决:字节Trae VS Cursor,谁才是开发者新宠?
· 开源Multi-agent AI智能体框架aevatar.ai,欢迎大家贡献代码
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

点击右上角即可分享
微信分享提示