Linux and Python

随笔分类 -  ELK 日志相关

摘要:最近公司的网站访问量越来越大,采用4台高配置服务器做后端Server,前端使用一个负载,日志从后端4台服务器收集到ELK统计,但是最近Logstash经常出问题,每次启动运行三四个小时就挂了,分析是由于日志量较大无法承受,因此想法办要优化一下结构: 阅读全文
posted @ 2016-05-02 10:55 jack.hang 阅读(1596) 评论(0) 推荐(0) 编辑
摘要:一:kibana安装: kibana主要是搜索elasticsearch的数据,并进行数据可视化的展现,新版使用nodejs。 1、下载地址: 2、解压安装: 3、编辑配置文件: 4、直接启动: 5、验证启动: 6、后台启动: 7、访问测试:默认监听端口5601http://192.168.10.2 阅读全文
posted @ 2016-04-12 21:48 jack.hang 阅读(18369) 评论(0) 推荐(0) 编辑
摘要:一:文档 官方文档地址:1.x版本和2.x版本 硬件要求: 1、内存,官方推荐64G,但是自己使用32G或16G也可以 2、CPU,核心越多越好 3、硬盘,越快越好,不建议使用NAS网络存储,官方建议使用RAID 0 4、网络,千兆或以上 5、JVM,建议使用比较新的版本,可以是openJDK或or 阅读全文
posted @ 2016-04-11 09:25 jack.hang 阅读(46122) 评论(0) 推荐(1) 编辑
摘要:一:需求及基础: 场景: 1、开发人员不能登录线上服务器查看详细日志 2、各个系统都有日志,日志数据分散难以查找 3、日志数据量大,查询速度慢,或者数据不够实时 4、一个调用会涉及到多个系统,难以在这些协调中快速定位数据 Elastic Search + LogStash + Kibana = EL 阅读全文
posted @ 2016-03-21 21:35 jack.hang 阅读(6518) 评论(0) 推荐(2) 编辑