03 2019 档案

Sqoop-将Hive ORC表导出到MySQL(全量、更新)
摘要:Sqoop-将Hive ORC表导出到MySQL 全量: 更新: 如果允许更新时插入:--update-mode allowinsert 如果只允许更新,不允许插入:--update-mode updateonly 阅读全文

posted @ 2019-03-29 13:50 嘣嘣嚓 阅读(921) 评论(0) 推荐(0) 编辑

Hive-开启动态分区
摘要:开启动态分区 阅读全文

posted @ 2019-03-26 20:17 嘣嘣嚓 阅读(455) 评论(0) 推荐(0) 编辑

Hive-行转列(explode)
摘要:场景:通过parseHtml UDF解析一串HTML,返回一以 @@ 分割的字符串,使用split分割字符串进数组中,然后将数组的元素转列。 开始的写法 --问题FAILED: SemanticException [Error 10081]: UDTF's are not supported out 阅读全文

posted @ 2019-03-26 19:55 嘣嘣嚓 阅读(3283) 评论(0) 推荐(0) 编辑

HUE中oozie执行shell
摘要:Oozie执行Shell,传入参数1. 新建一个workflow 2. 拖入一个shell 3. shell脚本如下 这是在命令行可执行的命令,其中有三个动态参数,12、$3,此处做了一个import的导入操作,把指定数据抽取到HDFS路径下,用了--query写SQL语句抽取想要的数据,此处 阅读全文

posted @ 2019-03-17 19:39 嘣嘣嚓 阅读(4455) 评论(0) 推荐(0) 编辑

HUE中Oozie执行Sqoop
摘要:Oozie执行Sqoop,传入参数(注意,在使用--query时,参数中一定不要带有空格,否则出错)1. 新建一个workflow 2. 拖入一个sqoop 3. sqoop抽取命令如下(建议先在命令行试下,因为oozie的错误提示很委婉,基本看不出错误原因) 这是在命令行可执行的命令,其中有三个动 阅读全文

posted @ 2019-03-17 19:36 嘣嘣嚓 阅读(4157) 评论(0) 推荐(0) 编辑

HUE中Oozie执行Hive脚本
摘要:Oozie执行hive,传入参数1. 新建一个workflow 2. 拖入一个hive2 3. hive脚本如下 注意,此处${date}表示需要执行时传入的参数4. 添加参数 5. 启动,填入参数即可 6.workflow.xml如下 阅读全文

posted @ 2019-03-17 19:31 嘣嘣嚓 阅读(1555) 评论(0) 推荐(0) 编辑

Oozie java.io.IOException: output.properties data exceeds its limit [2048]
摘要:在使用oozie调用sqoop时,报了下边这个错 解决 阅读全文

posted @ 2019-03-17 19:24 嘣嘣嚓 阅读(739) 评论(0) 推荐(0) 编辑

LeetCode-3.无重复字符的最长子串
摘要:题目 代码 开始忘记了回退操作。。 阅读全文

posted @ 2019-03-06 23:04 嘣嘣嚓 阅读(204) 评论(0) 推荐(0) 编辑

LeetCode-2.两数相加
摘要:题目 解法 阅读全文

posted @ 2019-03-05 22:36 嘣嘣嚓 阅读(251) 评论(0) 推荐(0) 编辑

LeetCode-1.两数之和
摘要:题目 代码 收获 阅读全文

posted @ 2019-03-04 22:41 嘣嘣嚓 阅读(136) 评论(0) 推荐(0) 编辑

导航

< 2025年2月 >
26 27 28 29 30 31 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 1
2 3 4 5 6 7 8
点击右上角即可分享
微信分享提示