Kibana深入开发工具和Lucene语法
Kibana深入开发工具和Lucene语法
Dev Tools
Dev Tools 页面包含开发工具,您可以使用这些Dev Tools与Kibana中的数据进行交互。
原先的交互式控制台Sense,使用户方便的通过浏览器直接与Elasticsearch进行交互。从Kibana 5开始改名并直接内建在Kibana,就是Dev Tools选项。
Kibana提供了Console UI来通过REST API与Elasticsearch交互,Console位于Kibana的Dev Tools栏下。Console有两个主要区域,左边是编辑区用来书写REST请求,右边用来显示请求返回结果。
常用语法
## 查看ES中所有的索引(所有日志)
GET _cat/indices
## 查询是否禁用swap
GET _nodes?filter_path=**.mlockall
## 查询最大文件描述符
GET _nodes/stats/process?filter_path=**.max_file_descriptors
## 查看所有分片情况
GET _cat/shards
[root@elkstack02 ~]# curl -XGET http://10.0.0.81:9200/_cat/shards
## 开发者工具,删除索引(日志)
DELETE xxxindex
DELETE 索引名
## curl删除
[root@elkstack02 ~]# curl -XDELETE http://10.0.0.81:9200/*-2022.09.06
[root@elkstack02 ~]# curl -XDELETE http://10.0.0.81:9200/*-2022-09-06
## 根据日期删除索引,日期设为变量
[root@elkstack02 ~]# curl -XDELETE http://10.0.0.81:9200/*-2022.09.06
[root@elkstack02 ~]# curl -XDELETE http://10.0.0.81:9200/*-2022-09-06
[root@elkstack02 ~]# date +%F
2022-09-08
[root@elkstack02 ~]# date +%Y.%m.%d
2022.09.08
[root@elkstack02 ~]# date +%Y.%m.%d -d "-1 day"
2022.09.07
[root@elkstack02 ~]# date +%Y.%m.%d -d "-2 day"
2022.09.06
[root@elkstack02 ~]# date +%Y.%m.%d -d "-3 day"
2022.09.05
[root@elkstack02 ~]# date +%Y.%m.%d -d "-4 day"
2022.09.04
[root@elkstack02 ~]# date +%Y.%m.%d -d "-1 month"
2022.08.08
[root@elkstack02 ~]# date +%Y.%m.%d -d "-1 year"
2021.09.08
[root@elkstack02 ~]# date +%F -d "-1 year"
2021-09-08
Lucene语法
全文搜索
在搜索栏输入404,会返回所有字段值中包含404的日志
使用双引号包起来作为一个短语搜索
"Yinchuan"
key:value字段查询
也可以按页面左侧显示的字段搜索
限定字段全文搜索:field:value
精确搜索:关键字加上双引号filed:"value"
status:404
搜索http状态码为404的日志
字段本身是否存在
_exists_:http
:返回结果中需要有http字段
_missing_:http
:不能含有http字段
status:404
通配符查询
?
匹配单个字符
*
匹配0到多个字符
可以看到两次搜索内容左上角,第一次是109 hits,第二次是182 hits
第一次匹配到的内容只有109条,第二次有182条。
?` `*` 不能用作第一个字符,例如:`?status` `*status
40?
正则查询
es支持部分正则功能,性能较差
domain:/adm?n.vantage(fx[prime]).com.cn/
模糊查询
单词后面加~
可以查出相关拼写的单词
elkstask03~
近似搜索
在短语后面加上~,可以搜到被隔开或顺序不同的单词
"where select"~5 表示 select 和 where 中间可以隔着5个单词,可以搜到 select password from users where id=1
范围搜索
status:[400 TO 510]
数值/时间/IP/字符串
类型的字段可以对某一范围进行查询
length:[100 TO 200]
sip:["172.24.20.110" TO "172.24.20.140"]
date:{"now-6h" TO "now"}
tag:{b TO e} 搜索b到e中间的字符
count:[10 TO *] * 表示一端不限制范围
count:[1 TO 5} [ ] 表示端点数值包含在范围内,{ } 表示端点数值不包含在范围内,可以混合使用,此语句为1到5,包括1,不包括5
可以简化成以下写法:
age:>10
age:<=10
age:(>=10 AND <20)
优先级查询
quick ^2 fox
使用使一个词语比另一个搜索优先级更高,默认为1,可以为0~1之间的浮点数,来降低优先级
逻辑操作
AND
OR
+:搜索结果中必须包含此项
-:不能含有此项
+apache -jakarta test aaa bbb:结果中必须存在apache,不能有jakarta,剩余部分尽量都匹配到
分组搜索
(elasticsearch OR logstash) AND kibana
字段分组
title:(+return +"pink panther")
host:(baidu OR qq OR google) AND host:(com OR cn)
转义特殊字符
+ - = && || > < ! ( ) { } [ ] ^ " ~ * ? : \ /
以上字符当作值搜索的时候需要用\转义
\(1\+1\)\=2用来查询(1+1)=2