es数据采集脚本样例
采集es数据时并进行分析作用,示例脚本:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 | #coding:utf-8 from elasticsearch5 import Elasticsearch import time class GetElasticSearchClass( object ): def __init__( self , url, time1): self .time1 = time1 self .es = Elasticsearch([url,]) def foreach( self , data): doc = data[ 'hits' ][ 'hits' ] print ( len (doc)) if len (doc): for item in doc: print (item[ '_source' ]) def search( self , index_name): #res = es.search(index='route*', size=10, body = { s_time = int ( round (( self .time1 - 60 ) * 1000000 )) e_time = int ( round ( self .time1 * 1000000 )) print (s_time) print (e_time) res = self .es.search(index = 'route*' , size = 1000 , body = { "query" : { "bool" :{ "must" : [ { "terms" : { "日志等级" : [ "WARNING" ] } }, { "range" : { "SERVER_TIMESTAMP" : { "gte" : s_time, "lte" : e_time } } } ] } }, }) self .foreach(res) if __name__ = = "__main__" : t_now = int (time.time()) tt = t_now % 60 start_time = t_now - tt obj = GetElasticSearchClass( '192.168.222.9:8400' , start_time) obj.search( 'switch*' ) |
然后定时运行~~
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· 提示词工程——AI应用必不可少的技术