随笔分类 - Flume

Flume1.5.0入门：安装、部署、及flume的案例

摘要：转自：http://www.aboutyun.com/thread-8917-1-1.html问题导读1.什么是flume2.flume的官方网站在哪里？3.flume有哪些术语？4.如何配置flume数据源码？一、什么是Flume? flume 作为 cloudera 开发的实时日志收集系统... 阅读全文

posted @ 2016-01-15 20:25 五三中阅读(517) 评论(0) 推荐(0) 编辑

基于Flume的美团日志收集系统(一)架构和设计

摘要：转自：http://www.aboutyun.com/thread-8317-1-1.html问题导读：1.Flume-NG与Scribe对比，Flume-NG的优势在什么地方？2.架构设计考虑需要考虑什么问题？3.Agent死机该如何解决？4.Collector死机是否会有影响？5.Flume-N... 阅读全文

posted @ 2016-01-15 20:22 五三中阅读(1042) 评论(0) 推荐(0) 编辑

【采集层】Kafka 与 Flume 如何选择

摘要：转自：http://my.oschina.net/frankwu/blog/355298采集层主要可以使用Flume, Kafka两种技术。Flume：Flume是管道流方式，提供了很多的默认实现，让用户通过参数部署，及扩展API.Kafka：Kafka是一个可持久化的分布式的消息队列。Kafka是... 阅读全文

posted @ 2016-01-12 15:52 五三中阅读(627) 评论(0) 推荐(0) 编辑