摘要: if [ -n "$1" ] && [ -n "$2" ];then dt=$1 hours=$2 end_time=$dt' '$hours start_time=`date --date="$end_time 1 hour ago" +"%Y-%m-%d %H"` else start_time 阅读全文
posted @ 2021-01-13 15:57 JXiao1994 阅读(100) 评论(0) 推荐(0) 编辑
摘要: start_time=$(date -d "1 hour ago" +"%Y-%m-%d %H") end_time=$(date "+%Y-%m-%d %H") dt=`date -d "-0 day" +%F` hours=`date -d "1 hour ago" +%H` end_hour= 阅读全文
posted @ 2021-01-08 16:18 JXiao1994 阅读(785) 评论(0) 推荐(0) 编辑
摘要: 如何获取文件路径? 修改job 文件 新增header名称 然后编写自定义拦截器代码如下 /** * 拦截source发送到通道channel中的消息 * * @param event 接收过滤的event * @return event 根据业务处理后的event */ @Override pub 阅读全文
posted @ 2021-01-08 16:08 JXiao1994 阅读(327) 评论(0) 推荐(0) 编辑
摘要: 如何实现flume 多目录采集? 修改源码 自己编译 方法还是copy 网友的 但是 的确可以实现(已经真实测过) 下面贴代码 修改对应的源码包 TaildirMatcher.java 新增代码 private List<File> getMatchingFilesNoCache(boolean r 阅读全文
posted @ 2021-01-08 16:04 JXiao1994 阅读(414) 评论(0) 推荐(0) 编辑
摘要: 第一步 :把phoenix 对应的jar 包 拷贝到hive/lib 目录下面 然后 在修改hive-site.xml 文件 新增 对应的jar包(jar 包在phoenix 目录下面) 可以只新增最后一个jar包 若配置了Hbase命名空间 还得新增 如何配置 第二步:就和官网的一样了 本案例是建 阅读全文
posted @ 2021-01-08 15:17 JXiao1994 阅读(921) 评论(0) 推荐(0) 编辑
摘要: 1、下载 下载文件为:mysql-5.7.28-1.el7.x86_64.rpm-bundle.tar (解压版) 2、卸载原来安装的mysql #检查 rpm -qa | grep mariadb rpm -qa | grep mysql ​ #卸载 remove后为上面命令查询到的内容,全文件名 阅读全文
posted @ 2020-12-15 16:36 JXiao1994 阅读(122) 评论(0) 推荐(0) 编辑
摘要: 第一步 service mysqld start --skip-grant-tables 启动mysql 开启跳过密码 第二步 update mysql.user set authentication_string=password('123456') where user='root'; 修改密码 阅读全文
posted @ 2020-12-15 16:18 JXiao1994 阅读(308) 评论(0) 推荐(0) 编辑
摘要: row_number() over(partition by display_code,alt_station,dt order by cast(alt_number AS BIGINT) DESC) rn 阅读全文
posted @ 2020-12-11 09:30 JXiao1994 阅读(1157) 评论(0) 推荐(0) 编辑
摘要: select values.PARAMETER_VALUES from public.ods_mes02_bobcat_others dd lateral view explode(split(dd.PARAMETER_VALUES,'\073')) values as PARAMETER_VALU 阅读全文
posted @ 2020-12-11 09:10 JXiao1994 阅读(158) 评论(0) 推荐(0) 编辑
摘要: split(values,'\073') 当hive split 分隔符 为 ';' 时候 应该用 '\073' 替换 否则会报语法错误 直接对字段进行split(';')操作会报错,其原因是因为:分号默认是sql的结束字符,因此需要用分号的二进制\073来表示。 阅读全文
posted @ 2020-12-11 09:02 JXiao1994 阅读(662) 评论(0) 推荐(0) 编辑