摘要： kafka集群 1. 下载wget http://mirror.rise.ph/apache/kafka/0.11.0.0/kafka_2.12-0.11.0.0.tgz2. 安装tar xf kafka_2.12-0.11.0.0.tgzmv kafka_2.12-0.11.0.0 /data/e 阅读全文

摘要： 故障排查： 1. 查看kafka、logstash、elasticsearch进程是否运行正常，显示正常。 2. 使用logstash在前台运行，有日志输出 3. 查看kafka的topic的offset，发现offset停止不动 原因分析： 日志量过大，导致kafka堵塞。 解决方法：增加kafk 阅读全文

摘要： supervisor进程管理器 1. 安装依赖yum install python-setuptools-devel 2. 安装supervisorpip install supervisor 或者 easy_install supervisor 3. 生成配置文件echo_supervisord_ 阅读全文

摘要： 1. Visualize 新建图形2. 选择图形类型 3. 选择索引 4. 设置Pie参数 5. 保存图形 阅读全文

摘要： 1. Visualize 新建图形2. 选择图形类型 3. 选择索引 4. 设置Timelion表达式 5. 保存图形 阅读全文

摘要： 1. Visualize 新建图形 2. 选择图形类型 3. 选择索引 4. 设置metric参数 4.1 count 4.2 unique count 5. 保存图形 阅读全文

摘要： 1. Visualize 添加图形 2. 选择图形类型 Coordinate Map 3. 选择索引 4. 设定成图的聚合字段 如果有数据，点击右上角的三角形，地图上就会有显示。 5. 保存图形 阅读全文

摘要： elasticsearch重要配置 日志和数据目录 path: logs: /var/log/elasticsearch data: /var/data/elasticsearch 注意：生产环境最好不要保留默认配置，不然在升级elasticsearch的时候，这些目录可能被删除或覆盖。 集群名称 阅读全文

摘要： elasticsearch REST api 命令模式：<REST Verb> /<Index>/<Type>/<ID>插入索引 PUT /customer?pretty查询索引列表 GET /_cat/indices?v给索引插入文档 PUT /customer/external/1?pretty 阅读全文

摘要： 前言：刚上线elk一个月左右，使用的kafka作为缓存队列，但是不知道为何，中间发生过好几次，elk突然没数据了，长达好几天都没有， 折腾了好久，好了，过几天又发生同样的状况。经查找，数据是有到达kafka，但是logstash读取不了。无奈之下，只能把kafka 更换为redis。 filebea 阅读全文