07 2017 档案

摘要:Flume简介 Apache Flume是一个分布式、可靠、高可用的日志收集系统,支持各种各样的数据来源,如http,log文件,jms,监听端口数据等等,能将这些数据源的海量日志数据进行高效收集、聚合、移动,最后存储到指定存储系统中,如kafka、分布式文件系统、Solr搜索服务器等; Apach 阅读全文
posted @ 2017-07-27 20:50 风一样的码农 阅读(6097) 评论(3) 推荐(2) 编辑
摘要:前言 最近看了看Apache Flume,在虚拟机里跑了一下flume + kafka + storm + mysql架构的demo,功能很简单,主要是用flume收集数据源(http上报信息),放入到kafka队列里,然后用storm消费kafka里的资源,计算结果并存入到mysql中; 在这期间 阅读全文
posted @ 2017-07-21 10:09 风一样的码农 阅读(4785) 评论(1) 推荐(0) 编辑

点击右上角即可分享
微信分享提示