摘要: 企业级实战模块五:ELK收集Web服务访问日志实战案例 ELK收集日志的几种方式 ELK收集日志常用的有两种方式,分别是: 不修改源日志的格式,而是通过logstash的grok方式进行过滤、清洗,将原始无规则的日志转换为规则的日志。 修改源日志输出格式,按照需要的日志格式输出规则日志,logsta 阅读全文
posted @ 2021-10-09 13:25 孤独的小人物 阅读(647) 评论(0) 推荐(0) 编辑
摘要: 企业级实战模块四:Logstash配置语法详解 1 Logstash基本语法组成 logstash之所以功能强大和流行,还与其丰富的过滤器插件是分不开的,过滤器提供的并不单单是过滤的功能,还可以对进入过滤器的原始数据进行复杂的逻辑处理,甚至添加独特的事件到后续流程中。 Logstash配置文件有如下 阅读全文
posted @ 2021-10-09 13:14 孤独的小人物 阅读(1032) 评论(0) 推荐(0) 编辑
摘要: 企业级实战模块三:ELK+Filebeat+Kafka+ZooKeeper构建大数据日志分析平台案例(下) 1 安装并配置Kafka Broker集群 1.1 下载与安装Kafka 可以从kafka官网https://kafka.apache.org/downloads获取kafka安装包,将下载下 阅读全文
posted @ 2021-10-09 13:12 孤独的小人物 阅读(356) 评论(0) 推荐(0) 编辑
摘要: 企业级实战模块二:ELK+Filebeat+Kafka+ZooKeeper构建大数据日志分析平台案例(上) 1 日志分析平台架构图 此架构稍微有些复杂,因此,这里做一下架构解读。 这个架构图从左到右,总共分为5层,每层实现的功能和含义分别介绍如下: 第一层、数据采集层 数据采集层位于最左边的业务服务 阅读全文
posted @ 2021-10-09 13:06 孤独的小人物 阅读(470) 评论(0) 推荐(0) 编辑
摘要: 企业级实战模块一:ELK场景架构及基础组件入门 1 ELK架构介绍 1.1 核心组成 ELK是一个应用套件,由Elasticsearch、Logstash和Kibana三部分组件组成,简称ELK;它是一套开源免费、功能强大的日志分析管理系统。ELK可以将我们的系统日志、网站日志、应用系统日志等各种日 阅读全文
posted @ 2021-10-09 12:58 孤独的小人物 阅读(592) 评论(0) 推荐(0) 编辑