关于flume的对应关系及常用的source

对应关系

  1. 在一个Flume进程中，source、channel、sink的关系是：1个source可以绑定多个channel，一个channel只能绑定1个sink。
  2. source和channel是一对多的关系，sink和channel是一对一的关系。

source

spooldir和exec的tail -F这两个数据源我们后期使用较多，主要网站中产生的数据，都是记录到日志文件中的。如果记录的日志文件只有一个，
那使用exec的tail -F采集数据。有些网站产生的日志文件是按照时间进行滚动的，适合使用spooldir采集数据
posted @ 2022-08-05 17:36  jsqup  阅读(112)  评论(0)  编辑  收藏  举报