曹伟雄

摘要： 前言 第一种：RabbitMQ内部集成Prometheus来获取指标 3.8.0之前版本，RabbitMQ可以使用单独的插件prometheus_rabbitmq_exporter来向Prometheus公开指标，要单独下载到RabbitMQ安装目录中进行安装； prometheus_rabbitm 阅读全文

摘要： 前言 第一种：JMX https://help.aliyun.com/document_detail/141108.html?spm=a2c4g.11186623.6.621.12bb4dea7EyM9F 第二种：kafka_exporter 本文就是采用第二种方式实现，相比JMX，优势在于不需要消 阅读全文

摘要： 前言 利用prometheus监控redis. github地址：https://github.com/oliver006/redis_exporter 技术架构 prometheus通过redis_exporter抓取redis的指标，一个prometheus可以配置很多redis_exporte 阅读全文

摘要： 日志架构 所有日志由Rsyslog或者Filebeat收集，然后传输给Kafka，Logstash作为Consumer消费Kafka里边的数据，分别写入Elasticsearch和Hadoop，最后使用Kibana输出到web端供相关人员查看，或者是由Spark接手进入更深层次的分析。 在以上整个架 阅读全文

摘要： 前言 ........... 工作原理 Filebeat由两个主要组件组成， prospectors和harvesters，他们一起协作tail文件并将事件发送给声明的输出。 harvester的职责是以行为单位读取文件，发送给输出，每个文件由不同的harvester读取。 prospector的职 阅读全文

摘要： 前言 通常来说，各种日志的格式都比较灵活复杂比如nginx访问日志或者并不纯粹是一行一事件比如java异常堆栈，而且还不一定对大部分开发或者运维那么友好，所以如果可以在最终展现前对日志进行解析并归类到各个字段中，可用性会提升很多。 grok过滤器插件就是用来完成这个功能的。默认可用。 grok的主要 阅读全文

摘要： 前言 有时您只想在特定条件下过滤或输出事件。为此，您可以使用条件（conditional）。比如在elk系统中想要添加一个type类型的关键字来根据不同的条件赋值，最后好做统计。 条件语法 if EXPRESSION { ... } else if EXPRESSION { ... } else { 阅读全文

摘要： 原理 使用filebeat来上传日志数据，logstash进行日志收集与处理，elasticsearch作为日志存储与搜索引擎，最后使用kibana展现日志的可视化输出。所以不难发现，日志解析主要还是logstash做的事情。 从上图中可以看到，logstash主要包含三大模块： INPUTS: 收 阅读全文

摘要： 使用方法： 复制代码保存为 image_registry.sh sh image_registry.sh -h #查看帮助 HUB=10.0.29.104:5000 改为自己的地址 #!/bin/bash #cnetos7,docker-ce v18.09.9,registry v2.6.2 #Do 阅读全文

摘要： 一、Docker Swarm上的容器选择 并非所有服务都应该部署在Swarm集群内。数据库以及其他有状态服务就不适合部署在Swarm集群内。 理论上，你可以通过使用labels将容器部署到特定节点上，但是这样的话，Swarm集群外的节点就很难访问它们了(Docker 1.12没有很好的方法，但是1. 阅读全文