ELK - 文章分类 - huazai007

EFK+kafka 收集nginx 访问日志并过滤字段

摘要：nginx的log文件通过filebeat和kafka收集后，都会加上一些自己的配置信息。我们先把日志输出修改为标准输出进行调试！ vim /etc/logstash/conf.d/nginx.conf output { #elasticsearch { # hosts => "192.168.1 阅读全文

posted @ 2020-02-29 20:51 huazai007 阅读(748) 评论(0) 推荐(0) 编辑

filebeat+kafka+logstash+es+kibana

摘要：filebeat配置 yum 源配置 [root@kafka01 bin]# cat /etc/yum.repos.d/filebeat.repo [filebeat-6.x] name=Elasticsearch repository for 6.x packages baseurl=https: 阅读全文

posted @ 2020-02-28 17:28 huazai007 阅读(568) 评论(1) 推荐(0) 编辑

fielbeat 收集tomcat日志

摘要：filebeat.yaml 配置 filebeat.inputs: - type: log # Change to true to enable this input configuration. enabled: true # Paths that should be crawled and fe 阅读全文

posted @ 2019-12-14 10:55 huazai007 阅读(244) 评论(0) 推荐(0) 编辑

kibana 安装 elastalert 插件

摘要：gitlab 地址：https://github.com/bitsensor 1 下载插件 wget https://github.com/bitsensor/elastalert-kibana-plugin/releases/download/1.0.2/elastalert-kibana-plu 阅读全文

posted @ 2019-12-07 17:12 huazai007 阅读(2357) 评论(3) 推荐(2) 编辑

Elasticsearch安装图形化界面工具Head插件

摘要：1 Head插件介绍以及下载 Head插件是Elasticsearch的图形化界面工具，通过此插件可以很方便的对数据进行增删改查等数据交互操作。可以将Head插件安装到任何一台机器上读者可以从https://github.com/mobz/elasticsearch-head 下载此插件。由于H 阅读全文

posted @ 2019-12-07 13:10 huazai007 阅读(490) 评论(0) 推荐(1) 编辑

ELK 监控nginx log

摘要：环境： 192.168.10.129 安装ES 9200，kibana：5601 192.168.10.131 安装了logstash：9600 登录到131上 log_format格式变量： $remote_addr #记录访问网站的客户端地址 $remote_user #远程客户端用户名 $ti 阅读全文

posted @ 2019-11-09 14:55 huazai007 阅读(698) 评论(0) 推荐(0) 编辑

ELK grok 内置变量

摘要：USERNAME [a-zA-Z0-9._-]+ #定义好的表达式的名字 USER %{USERNAME} # 引用或者调用%表示：%{表达式名字：匹配之后要放的字段名称} INT (?:[+-]?(?:[0-9]+)) BASE10NUM (?<![0-9.+-])(?>[+-]?(?:(?:[0 阅读全文

posted @ 2019-10-12 12:07 huazai007 阅读(348) 评论(0) 推荐(0) 编辑

ELK yum 安装部署

摘要：ELK 官网： https://www.elastic.co/cn/what-is/elk-stack ElasticSearch ElasticSearch 是一个高可用开源全文检索和分析组件。提供存储服务，搜索服务，大数据准实时分析等。一般用于提供一些提供复杂搜索的应用基本概念： Index 阅读全文

posted @ 2019-10-09 16:33 huazai007 阅读(1001) 评论(0) 推荐(0) 编辑

ELK 增加钉钉告警

摘要：以上是user_srv.yml的内容下面是dingtalk_alert.py的内容阅读全文

posted @ 2018-05-15 11:09 huazai007 阅读(952) 评论(0) 推荐(0) 编辑

ELK 索引操作

摘要：删除索引 srv03.err.timer_srv 阅读全文

posted @ 2018-02-08 20:13 huazai007 阅读(203) 评论(0) 推荐(0) 编辑

ELK 架构图

摘要：阅读全文

posted @ 2018-01-31 17:34 huazai007 阅读(162) 评论(0) 推荐(0) 编辑

ELK 集群配置

摘要：查看集群状态阅读全文

posted @ 2018-01-31 14:51 huazai007 阅读(229) 评论(0) 推荐(0) 编辑

Elastalert-基于Elasticsearch层面的监控邮件告警

摘要：官方文档：https://elastalert.readthedocs.io/en/latest/ ##钉钉告警插件 https://github.com/xuyaoqiang/elastalert-dingtalk-plugin 流程: elastalert读取指定elasticsearch索引, 阅读全文

posted @ 2017-12-19 09:50 huazai007 阅读(1619) 评论(0) 推荐(0) 编辑

文章分类 - ELK