随笔分类 -  elk

elasticsearch7 嵌套查询,根据嵌套字段排序--备忘
摘要:原理:根据条件查询参数主文档信息。然后sort的时候,查询复合条件的子文档的最大max\最小min等值来排序。 GET wk_bbs_index/_search { "post_filter": { "bool": { "adjust_pure_negative": true, "must": [ 阅读全文

posted @ 2020-09-08 12:00 陈惟鲜的博客 阅读(3695) 评论(0) 推荐(0) 编辑

ELK elasticsearch docker 多台服务器集群
摘要:之前安装集群是在一台服务器上的,现在试试多台服务器上,其实步骤差不多。 本次采用docker-compose安装。 elasticsearch集群 多台式 准备服务器 192.168.89.141192.168.89.142 // 每台机器增加目录配置文件 mkdir -p /home/soft/e 阅读全文

posted @ 2020-07-07 13:51 陈惟鲜的博客 阅读(2365) 评论(0) 推荐(2) 编辑

ELK elasticsearch数据迁移
摘要:因elasticsearch 集群中有需要需迁移,从A集环境迁移到B集群中,数据量不小。 网上搜索找到几种方案,试了下这种。 0.安装nodejs(如果已安装请忽略)执行 yum install -y nodejs 1.升级nodejs执行 npm install -g n n latest 2.安 阅读全文

posted @ 2020-06-29 12:50 陈惟鲜的博客 阅读(1053) 评论(0) 推荐(1) 编辑

ELK elasticsearch 因磁盘爆满导致无法 FORBIDDEN/12/index read-only / allow delete (api)
摘要:因日志产生多了,或者数据多了,导致硬盘满了,没及时清理。 elasticsearch 在程序连接后,提示无法连接问题。 解决: 1、清理掉多余日志。或文件信息。 2、修改索引,让其能够重新写入。 其中: 索引名称 china_index 用户名密码 ,没有的情况下可以不写 -u elastic:el 阅读全文

posted @ 2020-06-28 19:03 陈惟鲜的博客 阅读(1377) 评论(0) 推荐(0) 编辑

ELK docker elasticsearch7 设置xpack账号密码---整合springboot
摘要:之前配置了es7的xpack账号密码权限后,代码系统工程也需要同步修改。 这里走了个误区,因为在网上搜索了一大堆资料后,发现很多人走的都是引入x-pack-transport 包后,进行配置。搞了好久,就是搞不定这个包下载的问题。纠结郁闷了很久,求教了华哥(玉华哥是个技术大牛,啥都懂)。昨天他就立马 阅读全文

posted @ 2020-05-29 19:11 陈惟鲜的博客 阅读(3091) 评论(0) 推荐(0) 编辑

ELK docker elasticsearch7 设置xpack账号密码
摘要:之前写过一篇 设置的,感觉不大对。ELK elasticsearch7 设置账号、权限 还是重新配置一下。 准备资料:elasticsearch7.1.1、kibana7.1.1镜像文件。 在docker下成功安装集群。注意的是,所有的需要安装es相关的ELK版本都要一致,甚至es的插件版本也都是要 阅读全文

posted @ 2020-05-27 11:02 陈惟鲜的博客 阅读(9928) 评论(5) 推荐(0) 编辑

ELK elasticsearch 索引类型错误,又有数据,怎么办,索引复制替换
摘要:1、创建索引A PUT my_index 2、映射索引A内容 GET my_index/_mapping { } 3、复制 post _reindex { "source": { "index": "my_index" }, "dest": { "index": "my_index_new", "o 阅读全文

posted @ 2020-05-19 16:32 陈惟鲜的博客 阅读(359) 评论(0) 推荐(0) 编辑

ELK elasticsearch 与 springboot 结合使用,为了方便测试将MQ地址,索引名称写到配置文件中
摘要:为了方便测试将MQ地址,索引名称写到配置文件中。 想到使用springboot的@Value。 不行,经过多番查找,最终这样做。 1、es索引写在配置文件yml中 配置文件application.yml:配置索引名称。 search: index: video: chen_wk_video_inde 阅读全文

posted @ 2020-05-15 14:35 陈惟鲜的博客 阅读(377) 评论(0) 推荐(0) 编辑

elasticsearch与springboot整合 查询
摘要:在业务开发中,我们只要定义好我们的数据结构,然后入库。即可完成。 这里使用了ik分词器,类型定义为ik_max_word的都是会自动分词的。 重点是在查询,我们查询数据库的sql语句可以写的很复杂,在es这里,也可以写的很复杂,但是有没有那个必要就是另一回事了。 多条件查询:复杂查询 条件 bool 阅读全文

posted @ 2020-05-09 15:33 陈惟鲜的博客 阅读(4378) 评论(0) 推荐(0) 编辑

elasticsearch与springboot整合 并新增简单数据
摘要:es7后,type默认就是_doc。所以创建对象定义的时候,不用命名为别的type就行。 一 整合 1、pom.xml 引入elasticsearch相关。 <!-- es实体声明 --> <dependency> <groupId>org.springframework.boot</groupId 阅读全文

posted @ 2020-05-09 14:24 陈惟鲜的博客 阅读(1323) 评论(0) 推荐(1) 编辑

docker 版 portainer、jenkins、kibana 汉化中文界面
摘要:这几个软件结合着使用,但是英文不好的我总是看着吃力,于是想到了显示中文菜单界面比较好,网上一搜,还不少资料,于是按照步骤做下来,还好都如愿成功了。 1、portainer 如何安装之前有说过,不再复述 先下载汉化包,然后上传到服务器。 下载地址 : https://dl.quchao.net/Sof 阅读全文

posted @ 2020-03-30 14:47 陈惟鲜的博客 阅读(2911) 评论(2) 推荐(0) 编辑

ELK elasticsearch7 设置账号、权限
摘要:比较完整一篇,完整版 我们直接安装的ELK默认是没有账号与密码的。但是我们一旦放到生成上,就需要做一定的权限过滤,有些数据有些账号才能看到。否则都能看到,就很不科学了,有可能导致一些有心的人,搞成信息泄露。这个时候我们就需要设置账号密码了。 用户信息设置在LK中,也就是logstash、kibana 阅读全文

posted @ 2020-03-12 15:07 陈惟鲜的博客 阅读(12284) 评论(0) 推荐(2) 编辑

docker 外部镜像 上传到本地仓库
摘要:下载外部镜像,多个节点服务器需要安装的时候再到外网下载,虽然加了加速器,修改镜像源为国内的,但是下载速度还是挺慢。 于是想我们已经安装了镜像仓库,为什么不直接将外部下载的镜像信息上传到本地仓库呢。这样只需要下载一次,然后任何需要使用的机器到本地的仓库下载安装即可。 这里我安装ELK中的L,也就是lo 阅读全文

posted @ 2020-02-18 14:12 陈惟鲜的博客 阅读(3441) 评论(0) 推荐(0) 编辑

ELK docker 安装elasticsearch 集群之二
摘要:ELK docker 安装elasticsearch 集群之一 与之一样,也在一个节点的docker启动3个容器。 // 在创建容器时,就指定IP 172.19.0.10 172.19.0.11 172.19.0.12 配置文件 文件es00.yml cluster.name: elasticsea 阅读全文

posted @ 2020-02-13 14:29 陈惟鲜的博客 阅读(1589) 评论(0) 推荐(0) 编辑

ELK docker 安装elasticsearch 集群之一
摘要:在安装中,感觉有点困难,因es的版本6与7还是挺有区别的。 非docker版本在之前有写过一篇文章,介绍安装es集群。 https://www.cnblogs.com/a393060727/p/12111542.html 1、docker软件下载相关镜像 下载软件,全部统一一个版本:7.1.1。 / 阅读全文

posted @ 2020-02-10 21:29 陈惟鲜的博客 阅读(1124) 评论(0) 推荐(0) 编辑

ELK---- Elasticsearch 集群,用kabuna查看集群情况。
摘要:一、elasticsearch 集群。 准备工作:准备3台服务器。192.168.5.132192.168.5.133192.168.5.134 1、安装配置环境。之前的文章已写过,这里不重复。无非是JDK、elasticsearch 安装的过程。请查看之前的文章 2、其中其中一台服务,确保能正常访 阅读全文

posted @ 2019-12-28 14:14 陈惟鲜的博客 阅读(810) 评论(0) 推荐(0) 编辑

ELK---- Elasticsearch 使用ik中文分词器增加拓展热词
摘要:进入到我们ik分词器安装目录下的config目录 <?xml version="1.0" encoding="UTF-8"?><!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd"><properties> <comm 阅读全文

posted @ 2019-12-25 23:22 陈惟鲜的博客 阅读(940) 评论(0) 推荐(0) 编辑

ELK---- Elasticsearch 使用ik中文分词器
摘要:0、默认分词器。 默认分词器,查询的时候会把中文一个汉字当作一个关键字拆分,这样是不符合我们的需求的,所以需要安装分词器。 1、下载分词器。 当前有多种分词器可下载,据说比较好用的是IK分词器。 注意,下载分词器的时候,版本必须要与Elasticsearch安装的版本一致,否则会出现不可描述的错误。 阅读全文

posted @ 2019-12-25 23:02 陈惟鲜的博客 阅读(1462) 评论(0) 推荐(0) 编辑

ELK---- Elasticsearch 写入数据,查询
摘要:之前已安装了Elasticsearch与kibana。 倒排索引 正向索引 正排表是以文档的ID为关键字,表中记录文档中每个字的位置信息,查找时扫描表中每个文档中字的信息直到找出所有包含查询关键字的文档。 这种组织方法在建立索引的时候结构比较简单,建立比较方便且易于维护;因为索引是基于文档建立的,若 阅读全文

posted @ 2019-12-25 22:30 陈惟鲜的博客 阅读(1084) 评论(0) 推荐(0) 编辑

导航

< 2025年2月 >
26 27 28 29 30 31 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 1
2 3 4 5 6 7 8
点击右上角即可分享
微信分享提示