随笔分类 - ELK
摘要：Logstash 是 Elastic Stack（ELK Stack）中的一个核心组件，用于数据收集、处理和传输。它通过灵活的配置实现数据的输入、过滤和输出。以下是 Logstash 的配置详解，包括配置文件结构、常用插件和示例。 1. Logstash 配置文件结构 Logstash 配置文件通常
阅读全文
摘要：Kibana 是一个开源的数据可视化工具，通常与 Elasticsearch 结合使用，用于搜索、分析和可视化存储在 Elasticsearch 中的数据。以下是 Kibana 的使用手册，涵盖基本功能、操作步骤和常见场景。 目录 Kibana 简介 安装与配置 主要功能模块 Discover Vi
阅读全文
摘要：一、Beats平台介绍 1.1 Beats介绍 Beats是开源数据发送者，可以将其作为代理安装在您的服务器上，以将不同类型的运营数据发送到Elasticsearch。Beats可以直接发送数据到Elasticsearch或通过Logstash发送到Elasticsearch，可以使用它来分析和转换
阅读全文
摘要：在 Filebeat 中，filebeat.inputs 是用于定义数据输入的配置部分，而 type 是每个输入配置中的一个关键字段，用于指定输入的类型。Filebeat 支持多种输入类型，每种类型适用于不同的数据源和场景。以下是常见的 type 类型及其详解： 1. log（默认类型） 用途：从日
阅读全文
摘要：beats是轻量级的日志收集处理工具，Beats占用资源少 Packetbeat： 网络数据（收集网络流量数据） Metricbeat： 指标 （收集系统、进程和文件系统级别的 CPU 和内存使用情况等数据） Filebeat： 文件（收集日志文件数据） Winlogbeat： windows事件日
阅读全文
摘要：目录 主要参考链接 一、什么是ELK（端口9200） 主要特点： 1.存储：面向文档+JSON 2.检索：倒排+乐观锁 3.分析：监控+预警+可视化 4.支持集群 二、Logstash（端口5044） 三、Beats 四、Kibana+插件 1.ES-head插件（localhost:9100） 2
阅读全文
摘要：介绍了ELK（Elasticsearch, Logstash, Kibana）在大规模日志管理中的重要性，阐述了ELK解决日志分析的挑战，如日志收集、传输、存储和分析。文章详细讲解了ELK的组成部分，包括Filebeat的工作原理、Logstash的输入、过滤和输出阶段，以及Kibana的分析和可视
阅读全文
摘要：基础概念 Filebeat 是一个轻量级的日志收集器，属于 Elastic Stack（以前称为 ELK Stack）的一部分。它负责从文件系统、日志文件或其他输入源收集日志数据，并将这些数据转发到 Elasticsearch 或 Logstash 进行进一步处理和分析。 优势 轻量级：Filebe
阅读全文
