摘要: 一、Logstash与Redis那点事 在企业中,日志规模的量级远远超出我们的想象,这就是为什么会有一家公司 日志易 专门做日志收集,给大型金融公司收集日志,比如银行,因为你有可能看到,1秒钟好几千万的日志量,往服务器写入,那么企业中的集群,架构都不是单台的,而是多台的,一台如果是1千万,那么5台的 阅读全文
posted @ 2020-12-09 11:51 nick_xm 阅读(233) 评论(0) 推荐(0) 编辑
摘要: filebeat学习 一、介绍 1.描述 Filebeat附带预构建的模块,这些模块包含收集、解析、充实和可视化各种日志文件格式数据所需的配置,每个Filebeat模块由一个或多个文件集组成,这些文件集包含摄取节点管道、Elasticsearch模板、Filebeat勘探者配置和Kibana仪表盘。 阅读全文
posted @ 2020-12-09 10:50 nick_xm 阅读(71) 评论(0) 推荐(0) 编辑
摘要: 收集TCP/UDP日志 通过logstash的tcp/udp插件收集日志,通常用于在向elasticsearch日志补录丢失的部分日志,可以将丢失的日志通过一个TCP端口直接写入到elasticsearch服务器。 1.配置Logstash #进入Logstash配置文件目录 [root@redis 阅读全文
posted @ 2020-12-09 10:12 nick_xm 阅读(251) 评论(0) 推荐(0) 编辑
摘要: 一,使用logstash配置rsyslog收集haproxy日志 1.rsyslog介绍 在centos 6及之前的版本叫做syslog,centos 7开始叫做rsyslog,根据官方的介绍,rsyslog(2013年版本)可以达到每秒转发百万条日志的级别,rsyslog是日志收集处理工具 它提供 阅读全文
posted @ 2020-12-09 10:08 nick_xm 阅读(238) 评论(0) 推荐(0) 编辑