2019年3月17日

HUE中oozie执行shell

摘要: Oozie执行Shell,传入参数1. 新建一个workflow 2. 拖入一个shell 3. shell脚本如下 这是在命令行可执行的命令,其中有三个动态参数,$1、$2、$3,此处做了一个import的导入操作,把指定数据抽取到HDFS路径下,用了--query写SQL语句抽取想要的数据,此处 阅读全文

posted @ 2019-03-17 19:39 嘣嘣嚓 阅读(4431) 评论(0) 推荐(0) 编辑

HUE中Oozie执行Sqoop

摘要: Oozie执行Sqoop,传入参数(注意,在使用--query时,参数中一定不要带有空格,否则出错)1. 新建一个workflow 2. 拖入一个sqoop 3. sqoop抽取命令如下(建议先在命令行试下,因为oozie的错误提示很委婉,基本看不出错误原因) 这是在命令行可执行的命令,其中有三个动 阅读全文

posted @ 2019-03-17 19:36 嘣嘣嚓 阅读(4128) 评论(0) 推荐(0) 编辑

HUE中Oozie执行Hive脚本

摘要: Oozie执行hive,传入参数1. 新建一个workflow 2. 拖入一个hive2 3. hive脚本如下 注意,此处${date}表示需要执行时传入的参数4. 添加参数 5. 启动,填入参数即可 6.workflow.xml如下 阅读全文

posted @ 2019-03-17 19:31 嘣嘣嚓 阅读(1520) 评论(0) 推荐(0) 编辑

Oozie java.io.IOException: output.properties data exceeds its limit [2048]

摘要: 在使用oozie调用sqoop时,报了下边这个错 解决 阅读全文

posted @ 2019-03-17 19:24 嘣嘣嚓 阅读(732) 评论(0) 推荐(0) 编辑

导航