随笔分类 - elasticsearch
摘要:es集群配置 1、集群配置 es三个节点,每个节点的配置都是 8核cpu 64G内存 8T硬盘 每天的日志量100G,三个分片。 这样的配置可以保留90天的日志 集群有 3 个节点,每个节点 8TB 硬盘,整个集群的存储总容量为:8TB × 3 = 24TB 总存储空间 2、日志数据量 每天的日志量
阅读全文
摘要:在 Filebeat、Logstash、Kafka 和 Elasticsearch(ES) 之间构建数据流管道时,它们的协同工作可以帮助你实现高效的日志收集、处理和存储。 1、详细说明 下面是如何将这四个组件连接在一起的详细说明 1.1 架构概览 Filebeat:轻量级日志收集器,主要负责从各个服
阅读全文
摘要:1、深入理解ES集群架构的底层原理 这篇主要讲解es的集群架构的底层原理,es的索引分片,副本等基本知识 集群的核心概念 在安装集群之前,先了解一下集群的几个概念。 如下图 ,就是一个三个节点组成的es集群,p0、p1、p2表示一个节点中的分片,R0、R1、R2表示分片对应的副本 1.1 节点以及节
阅读全文
摘要:[root@es ~]# cat /data/elasticsearch-6.8.8/config/elasticsearch.yml cluster.name: es_user node.name: es-user01 path.data: /data/elasticsearch_data pat
阅读全文
摘要:原文:https://www.oubayun.com/centos-79-deploys-elasticsearch-791-standalone-version.html 写在前面的,原来不但算写这个了,因为原文已经写的很好了。但是原文现在访问起来有点慢,害怕原文哪天彻底不能访问了 所以就自己写一
阅读全文