摘要: start_time=$(date -d "1 hour ago" +"%Y-%m-%d %H") end_time=$(date "+%Y-%m-%d %H") dt=`date -d "-0 day" +%F` hours=`date -d "1 hour ago" +%H` end_hour= 阅读全文
posted @ 2021-01-08 16:18 JXiao1994 阅读(792) 评论(0) 推荐(0) 编辑
摘要: 如何获取文件路径? 修改job 文件 新增header名称 然后编写自定义拦截器代码如下 /** * 拦截source发送到通道channel中的消息 * * @param event 接收过滤的event * @return event 根据业务处理后的event */ @Override pub 阅读全文
posted @ 2021-01-08 16:08 JXiao1994 阅读(327) 评论(0) 推荐(0) 编辑
摘要: 如何实现flume 多目录采集? 修改源码 自己编译 方法还是copy 网友的 但是 的确可以实现(已经真实测过) 下面贴代码 修改对应的源码包 TaildirMatcher.java 新增代码 private List<File> getMatchingFilesNoCache(boolean r 阅读全文
posted @ 2021-01-08 16:04 JXiao1994 阅读(416) 评论(0) 推荐(0) 编辑
摘要: 第一步 :把phoenix 对应的jar 包 拷贝到hive/lib 目录下面 然后 在修改hive-site.xml 文件 新增 对应的jar包(jar 包在phoenix 目录下面) 可以只新增最后一个jar包 若配置了Hbase命名空间 还得新增 如何配置 第二步:就和官网的一样了 本案例是建 阅读全文
posted @ 2021-01-08 15:17 JXiao1994 阅读(936) 评论(0) 推荐(0) 编辑