摘要: 问题描述 由于神策服务器和maxcompute没有打通,用不了数据集成,就采用tunnel的方式将文件上传到maxcompute,先从神策服务器上将数据查出来,并插入到一张临时表中,然后将文件从hdfs上下载到本地,之后用tunnle上传到maxcompute。 报错 排查原因 发现以下日志文件都是 阅读全文
posted @ 2022-05-12 11:30 dch_21 阅读(32) 评论(0) 推荐(0) 编辑
摘要: 原链接 问题描述 Dataphin的SQL任务中使用left join时报错:“ODPS-0130071:[4,4] Semantic analysis exception - expect equality expression (i.e., only use '=' and 'AND') for 阅读全文
posted @ 2022-04-01 14:29 dch_21 阅读(2657) 评论(0) 推荐(0) 编辑
摘要: maxcompute开启全表扫描 set odps.sql.allow.fullscan=false/true 阅读全文
posted @ 2022-02-10 13:39 dch_21 阅读(747) 评论(0) 推荐(0) 编辑
摘要: 正则 数组转字符串 concat_ws 替换html元素 REGEXP_REPLACE(ticket_content,'<([^>]*)>|(&nbsp;)|(&nbsp)','') 字符串去重 concat_ws(',',array_distinct(split(replace(replace(s 阅读全文
posted @ 2022-02-10 13:38 dch_21 阅读(105) 评论(0) 推荐(0) 编辑
摘要: 今天写了个crontab定时任务,遇到了小问题,顺便记录下 crontab日志文件 查错: tail -f /var/log/cron发现如下错误: crontab无法执行且(root) MAIL (mailed 54 bytes of output but got status 0x004b#01 阅读全文
posted @ 2022-01-26 13:51 dch_21 阅读(53) 评论(0) 推荐(0) 编辑
摘要: sh sc2odps_online.sh 20220113 >> 20220113.log 2>&1 & 阅读全文
posted @ 2022-01-17 10:32 dch_21 阅读(33) 评论(0) 推荐(0) 编辑
摘要: ![](https://img2020.cnblogs.com/blog/2009668/202201/2009668-20220111174256280-1989444481.png) ![](https://img2020.cnblogs.com/blog/2009668/202201/2009668-20220111174235418-552966550.png) 阅读全文
posted @ 2022-01-11 17:43 dch_21 阅读(40) 评论(0) 推荐(0) 编辑
摘要: 今天入职新公司,领了本MacBook pro,第一次使用mac,有点不习惯,但是真的很丝滑。记录下自己装jdk和maven时的过程 jdk官网 到官网下载jdk(我是找朋友要的) 安装 默认jdk的安装路径(我把Home目录拷贝到了桌面,因为配置maven的时候老是说JAVA_HOME没有生效) 配 阅读全文
posted @ 2022-01-10 23:22 dch_21 阅读(216) 评论(0) 推荐(0) 编辑
摘要: 当show二级分区的时候会展示全路径 show partitions dmr_dev.dmr_dip_channel_quantity partition(ds = '20220105'); 阅读全文
posted @ 2022-01-06 10:09 dch_21 阅读(59) 评论(0) 推荐(0) 编辑
摘要: 知乎——埋点系列-如何准确标识用户 神策——如何准确的标识用户概述 神策——如何正确标识用户概述 神策——标识用户 数数科技——用户识别 阅读全文
posted @ 2022-01-04 10:50 dch_21 阅读(11) 评论(0) 推荐(0) 编辑