ElasticSearch--------->批量索引------->推荐方法、注意事项、性能优化
ES批量索引:
- 概述:建议使用bulk API来创建索引它比你一次给一条日志创建一次索引快多了。
- 使用bulk API主要要考虑两个事情:
- 1)最佳的批量大小。它取决于很多你的设定。如果要说起始值的话,可以参考一下pyes里的默认值,即400。
- 2)给批量操作设定时器。如果你添加日志到缓冲,然后等待它的大小触发限制以启动批量插入,千万确定还要有一个超时限制作为大小限制的补充。否则,如果你的日志量不大的话,你可能看到从日志发布到出现在elasticsearch里有一个巨大的延时。
- 使用bulk API主要要考虑两个事情:
- 使用bulk API进行批量索引的编程思路:
学习的过程中总会得到一些心得体会,认真地将它们记录下来并分享给每一个愿意花费时间去阅读它们的人,然后意外地收获某个读者的评论,从而激发出新的感想,是一件十分令人欢快的事。如果你也在研习这方面的知识,欢迎加入到我们的队伍中来,和我们一起进步吧(^_^)
posted on 2017-08-03 09:51 LXRM-JavaWeb、ML 阅读(282) 评论(0) 编辑 收藏 举报