摘要：为了进行数字化IT治理，需要对一些应用进程相关指标进行采集并入库。收集到的应用指标数据最好要进行ES入仓，入到Kafka里面，并通过Kibana可视化展示。 下面是应用指标数据进行ES入仓的请求说明 这里使用了两个脚本：1）shell脚本进行指标数据采集（最终使用脚本：20_app_process_ 阅读全文

摘要：一、ElasticSearch使用场景存储ElasticSearch天然支持分布式，具备存储海量数据的能力，其搜索和数据分析的功能都建立在ElasticSearch存储的海量的数据之上；ElasticSearch很方便的作为海量数据的存储工具，特别是在数据量急剧增长的当下，ElasticSearch 阅读全文

摘要：之前在IDC机房环境部署了一套ELK日志集中分析系统, 这里简单总结下ELK中Elasticsearch健康状态相关问题, Elasticsearch的索引状态和集群状态传达着不同的意思。 一. Elasticsearch 集群健康状态一个 Elasticsearch 集群至少包括一个节点和一个索引 阅读全文

摘要：线上部署了ELK+Redis日志分析平台环境, 随着各类日志数据源源不断的收集, 发现过了一段时间之后, ELK查看会原来越慢, 重启elasticsearch服务器节点之前同步时间也会很长, 这是因为长期以来ELK收集的索引没有删除引起的! 以下是ELK批量删除索引的操作记录: 1) 访问head 阅读全文

摘要：一. ElasticSearch简单介绍 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。 阅读全文

摘要：对于Elasticsearch的学习，需要清楚的明白它的每个核心概念，由浅入深的了解，才能更好的掌握这门技术。下面先简单罗列下Elasticsearch的核心概念： 一、Elasticsearch数据组织 1. 逻辑组织如下图所示，Elasticsearch使用index和doc_type来组织数据 阅读全文

摘要：学习Elasticsearch有一段时间了，参考网上的一些资料，对于Elasticsearch集群状态一些重要监控指标数据在此进行小结，以加深理解。 Elasticsearch集群监控状态指标分三个级别- 集群级别：集群级别的监控主要是针对整个Elasticsearch集群来说，包括集群的健康状况、 阅读全文