justin 齐齐
生命在于折腾
摘要: 9.ElkStack上线规划 上线ELKstack前,先做好如下规范能更好的开启ELKstack之旅。 阅读全文
posted @ 2017-12-09 16:42 justin01 阅读(600) 评论(0) 推荐(0) 编辑
摘要: 7.案例logstash写入elasticsearch 数据直接写入elasticsearch中(适合日志数量不大,没有Redis) 阅读全文
posted @ 2017-12-09 16:41 justin01 阅读(259) 评论(0) 推荐(0) 编辑
摘要: 6.5消息队列解耦综合实践 1.将所有需要收集的日志写入一个配置文件,发送至node4的Redis服务(以下配置文件在各个节点上)。 2.将Redis消息队列收集的所有日志,写入Elasticsearch集群。 3.查看Elasticsearch情况 阅读全文
posted @ 2017-12-09 16:40 justin01 阅读(366) 评论(0) 推荐(0) 编辑
摘要: 6.4Logstach收集nginx日志 1.安装Nginx 2.nginx改成json格式输出日志 3.编写收集Nginx访问日志 阅读全文
posted @ 2017-12-09 16:39 justin01 阅读(338) 评论(0) 推荐(0) 编辑
摘要: 6.2Logstach收集tcp日志 1.编写收集tcp网络日志 2.往666端口发送数据几种方式: 阅读全文
posted @ 2017-12-09 16:38 justin01 阅读(890) 评论(0) 推荐(0) 编辑
摘要: 6.3Logstach收集java日志 es是java服务,收集es需要注意换行问题 1.编写收集Elasticsearch访问日志 阅读全文
posted @ 2017-12-09 16:38 justin01 阅读(433) 评论(0) 推荐(0) 编辑
摘要: 6.1Logstach收集rsyslog日志 1.修改rsyslog.conf配置文件 2.编写收集rsyslog日志,写入至node4的Redis(Redis配置请自行谷歌,这里不在介绍) 阅读全文
posted @ 2017-12-09 16:37 justin01 阅读(672) 评论(0) 推荐(0) 编辑
摘要: 5.Logstash日志收集实践 在学习Logstash之前,我们需要先了解以下几个基本概念: logstash收集日志基本流程: input-->codec-->filter-->codec-->output 1.input:从哪里收集日志。 2.filter:发出去前进行过滤 3.output: 阅读全文
posted @ 2017-12-09 16:36 justin01 阅读(699) 评论(0) 推荐(0) 编辑
摘要: 8.Kibana实践 Kibana 是为 Elasticsearch 设计的开源分析和可视化平台。你可以使用 Kibana 来搜索,查看存储在 Elasticsearch 索引中的数据并与之交互。你可以很容易实现高级的数据分析和可视化,以图表的形式展现出来。 8.1安装Kibana 1.安装java 阅读全文
posted @ 2017-12-09 16:35 justin01 阅读(2169) 评论(0) 推荐(0) 编辑
摘要: 1.没有日志分析系统 1.1运维痛点 1.运维要不停的查看各种日志。 2.故障已经发生了才看日志(时间问题。) 3.节点多,日志分散,收集日志成了问题。 4.运行日志,错误等日志等,没有规范目录,收集困难。 1.2环境痛点 1.开发人员不能登陆线上服务器查看详细日志。 2.各个系统都有日志,日志数据 阅读全文
posted @ 2017-12-09 16:34 justin01 阅读(3277) 评论(0) 推荐(0) 编辑