ELK logstash 处理MySQL慢查询日志

在生产环境下,logstash 经常会遇到处理多种格式的日志,不同的日志格式,解析方法不同。下面来说说logstash处理多行日志的例子,对MySQL慢查询日志进行分析,这个经常遇到过,网络上疑问也很多。

MySQL慢查询日志格式如下:

 

filebeat配置

我这里是使用filebeat 1.1.1版本的,之前版本没有multiline配置项,具体方法看后面那种。

 

logstash配置

1. input段配置

 

 

2. filter 段配置

 

关键之重是grok正则的配置。

3. output段配置

 

标准输出结果截图

Elasticsearch

elasticsearch结果截图

Elasticsearch

Elasticsearch

如果是使用filebeat1.1.1之前的版本,配置如下:

1. filebeat配置

 

 

2. logstash input段配置

 

其它配置不变。

如有疑问跟帖,或者加群沟通。

posted @ 2018-03-20 15:33  技术颜良  阅读(763)  评论(0编辑  收藏  举报