随笔分类 - 日志管理
ELKF日志系统搭建(二)进阶——使用 Kafka 作为日志消息缓存
摘要:说明: 在一些比较大的业务使用场景中,因为应用繁多,需要收集的日志也很多,通过 filebeat 或者logstash 收集上来的日志如果全都直接发送给 ES,那么就会对 ES 集群产生一定的压力,为了避免出现日志接收不过来的问题,于是引入了消息队列作为缓存,比如常见的使用 Redis 或 Kafk
阅读全文
ELKF日志系统搭建(一)基础——ELKF架构
摘要:一、ELKF简介 ElasticSearch:搜索、分析和存储数据Logstash:采集日志、格式化、过滤数据(数据清洗的过程),最后将数据推送到Elasticsearch存储Kibana:数据可视化Beats:集合了多种单一用途数据采集器,用于实现从边缘机器向Logstash和Elasticsea
阅读全文