实时监控hive日志文件,并上传到hdfs

1:将Hadoop相关jar包放到/opt/module/flume/lib文件夹下

  

 

2:在flume/job文件夹下创建 flume-file-hdfs.conf文件

3:在配置文件中添加如下配置

   

  

   

 

4:在flume根目录执行监控配置

  

 

5:开启hdfs、yarn、hive

6:执行hive操作产生日志

7:在hdfs网页查看文件

  

 

posted @ 2020-04-10 20:16  拔丝小红薯  阅读(739)  评论(0编辑  收藏  举报