摘要: Day 06 Flume 1. Flume 介绍 1.1. 概述 Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 Flume可以采集文件,socket数据包、文件、文件夹、kafka等各种形式源数据,又可以将采集到 的数据(下沉sink)输出到HDFS、hbase、hive 阅读全文
posted @ 2020-04-05 19:25 Curedfisher 阅读(176) 评论(0) 推荐(0) 编辑
摘要: 13-flume高可用-failover-模型分析(搭建一个Flume集群,当一个Flume挂掉之后,其他flume迅速补上) 14-flume高可用-failover-配置文件编写 vim agent.conf #agent1 name agent1.channels = c1 agent1.so 阅读全文
posted @ 2020-04-05 16:56 Curedfisher 阅读(192) 评论(0) 推荐(0) 编辑