随笔分类 -  Oozie

HUE中oozie执行shell
摘要:Oozie执行Shell,传入参数1. 新建一个workflow 2. 拖入一个shell 3. shell脚本如下 这是在命令行可执行的命令,其中有三个动态参数,12、$3,此处做了一个import的导入操作,把指定数据抽取到HDFS路径下,用了--query写SQL语句抽取想要的数据,此处 阅读全文

posted @ 2019-03-17 19:39 嘣嘣嚓 阅读(4455) 评论(0) 推荐(0) 编辑

HUE中Oozie执行Sqoop
摘要:Oozie执行Sqoop,传入参数(注意,在使用--query时,参数中一定不要带有空格,否则出错)1. 新建一个workflow 2. 拖入一个sqoop 3. sqoop抽取命令如下(建议先在命令行试下,因为oozie的错误提示很委婉,基本看不出错误原因) 这是在命令行可执行的命令,其中有三个动 阅读全文

posted @ 2019-03-17 19:36 嘣嘣嚓 阅读(4157) 评论(0) 推荐(0) 编辑

HUE中Oozie执行Hive脚本
摘要:Oozie执行hive,传入参数1. 新建一个workflow 2. 拖入一个hive2 3. hive脚本如下 注意,此处${date}表示需要执行时传入的参数4. 添加参数 5. 启动,填入参数即可 6.workflow.xml如下 阅读全文

posted @ 2019-03-17 19:31 嘣嘣嚓 阅读(1555) 评论(0) 推荐(0) 编辑

Oozie java.io.IOException: output.properties data exceeds its limit [2048]
摘要:在使用oozie调用sqoop时,报了下边这个错 解决 阅读全文

posted @ 2019-03-17 19:24 嘣嘣嚓 阅读(739) 评论(0) 推荐(0) 编辑

导航

< 2025年2月 >
26 27 28 29 30 31 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 1
2 3 4 5 6 7 8
点击右上角即可分享
微信分享提示