摘要: Flume与Logstash相比,个人的体会如下: Logstash比较偏重于字段的预处理;而Flume偏重数据的传输; Logstash有几十个插件,配置灵活;FLume则是强调用户的自定义开发(source和sink的种类也有一二十个吧,channel就比较少了)。 Logstash的input 阅读全文
posted @ 2017-03-21 23:04 moonandstar08 阅读(867) 评论(0) 推荐(0) 编辑
摘要: 一、Kafka ->logstash ->elasticsearch logstash 5.X以上版本不兼容5.x以下版本,因此在升级logstash时会遇到很多坑。首先是配置的变化,可以参考如下配置: 完成配置后可以通过如下命令来检测配置文件是否有语法错误: 另外,elasticsearch 5. 阅读全文
posted @ 2017-03-21 21:46 moonandstar08 阅读(3601) 评论(0) 推荐(0) 编辑