代码改变世界

随笔分类 -  elastic search

从es中拉取全部数据/大量数据 使用scroll+scan避免深分页

2018-07-28 00:13 by ZealouSnesS, 7530 阅读, 收藏, 编辑
摘要: es一次请求默认返回的数据条数是10条,可以通过设置size参数来控制返回数据的条数: 如果要返回很多数据,可以把size设置的很大,不过elastic search默认size最大不能超过1万。 那么如果数据量很大,超过1万,而又想要把所有数据都拉出来怎么办呢? 有三种方法:聚合,修改es的siz 阅读全文

elastic search 查询语句

2018-07-24 12:02 by ZealouSnesS, 2122 阅读, 收藏, 编辑
摘要: 部署了半个月,分析一下数据: 需要提前知道的是,tpot中,每天的数据存一个index,然后每个index里面有不同的type,每条请求一个document 共24万条请求: 查看整个集群所有数据 以7月23日为例,1.5万条请求: 查看某一index的所有数据 查看每天都能捕获到哪些type的请求 阅读全文

elasticsearch数据迁移——elasticsearch-dump使用

2018-07-23 18:22 by ZealouSnesS, 1712 阅读, 收藏, 编辑
摘要: 先安装好nodejs和nodejs的包管理工具npm。然后安装elasticsearch-dump: npm install elasticdump 下面迁移数据: 先在目的地址创建一个index来储存数据: 执行迁移命令:--input设置导出的源地址,--output设置导出的目的地址 这里我们 阅读全文

java连接elastic search 9300

2018-07-18 17:35 by ZealouSnesS, 3038 阅读, 收藏, 编辑
摘要: java连接elastic search 导入jar包:https://www.elastic.co/guide/en/elasticsearch/client/java-api/5.5/_maven_repository.html 注意,使用的jar包版本尽量与所连的els版本一致 创建连接:ht 阅读全文

elastic search使用

2018-04-09 10:27 by ZealouSnesS, 662 阅读, 收藏, 编辑
摘要: elastic使用 使用python时注意保持一个好习惯:不要使用类似str、type这样的变量名,很容易引发错误: https://blog.csdn.net/lifelegendc/article/details/55051374 每启动的一个elastic search相当于创建一个节点nod 阅读全文

elastic search远程测试

2018-04-09 10:24 by ZealouSnesS, 1332 阅读, 收藏, 编辑
摘要: elastic search远程测试 推荐:elastic官方教程:https://www.elastic.co/guide/en/elasticsearch/reference/6.2/index.html 同一子网内两机器 http restful远程测试(9200端口) 进入elastic s 阅读全文

elastic search安装与本地测试

2018-04-09 10:22 by ZealouSnesS, 2856 阅读, 收藏, 编辑
摘要: elastic search安装与本地测试 elastic search是一个全文搜索引擎 教程: 综合:http://www.ruanyifeng.com/blog/2017/08/elasticsearch.html 强烈推荐 centos7上安装与配置:https://www.biaodian 阅读全文
点击右上角即可分享
微信分享提示