摘要：
转载 2014年04月26日 14:41:15 4470 转载 2014年04月26日 14:41:15 4470 由于工作需要，要帮助同事查看linux服务器的缓存开启情况，经过查找资料，可确定通过以下方法确定Linux磁盘缓存是否已开启。1.命令行下执行free命令，当显示如下红框内的信息（sw 阅读全文
摘要：
Jenkins + Pipeline 构建流水线发布 利用Jenkins的Pipeline配置发布流水线 参考： https://jenkins.io/doc/pipeline/tour/deployment/ 新建一个名为pipeline-loop的 pipeline项目，然后配置，关键配置如下： 阅读全文
摘要：
一、Search Guard 简介 Search Guard 是 Elasticsearch 的安全插件。它为后端系统（如LDAP或Kerberos）提供身份验证和授权，并向Elasticsearch添加审核日志记录和文档/字段级安全性。 Search Guard 所有基本安全功能都是免费的，并且内 阅读全文
摘要：
大数据平台搭建（hadoop+spark） 一.基本信息 1. 服务器基本信息 2. 软件基本信息 3.环境变量汇总 4. 基本环境配置（master、slave相同操作） 4.1 配置jdk 4.2 配置java环境变量 添加如下信息 4.3 刷新配置文件： 4.4 配置hosts 4.5 配置免 阅读全文
摘要：
应用场景：ELK实际上是三个工具的集合，ElasticSearch + Logstash + Kibana，这三个工具组合形成了一套实用、易用的监控架构， 很多公司利用它来搭建可视化的海量日志分析平台。 官网下载地址：https://www.elastic.co/downloads Elastics 阅读全文
摘要：
一：kibana安装： kibana主要是搜索elasticsearch的数据，并进行数据可视化的展现，新版使用nodejs。 1、下载地址： 2、解压安装： 3、编辑配置文件： 4、直接启动： 5、验证启动: 6、后台启动： 7、访问测试：默认监听端口5601http://192.168.10.2 阅读全文
摘要：
ELK 日志分析实例一、ELK-web日志分析二、ELK-MySQL 慢查询日志分析三、ELK-SSH登陆日志分析四、ELK-vsftpd 日志分析 一、ELK-web日志分析 通过logstash grok正则将web日志过滤出来，输出到Elasticsearch 搜索引擎里，通过Kibana前端 阅读全文
摘要：
1. 概述 我们在考虑MySQL数据库的高可用的架构时，主要要考虑如下几方面： 1.1 如果数据库发生了宕机或者意外中断等故障，能尽快恢复数据库的可用性，尽可能的减少停机时间，保证业务不会因为数据库的故障而中断。 1.2 用作备份、只读副本等功能的非主节点的数据应该和主节点的数据实时或者最终保持一致 阅读全文
摘要：
理解JVM GC对于我们把控Java应用有很大的帮助。下面我从运维角度，把网上的JVM相关的资料整理如下，以加深对JVM GC的理解。如有错误的地方，请看官指正。 JVM内存使用分类 JVM的内存分区关系: 【JVM整个堆内存】=年轻代+年老代 【JVM整个内存】= (堆内存) ＋ 非堆内存 = ( 阅读全文
摘要：
在生产环境下，logstash 经常会遇到处理多种格式的日志，不同的日志格式，解析方法不同。下面来说说logstash处理多行日志的例子，对MySQL慢查询日志进行分析，这个经常遇到过，网络上疑问也很多。 MySQL慢查询日志格式如下： 1 2 3 4 5 # User@Host: ttlsa[tt 阅读全文