07 2020 档案
记一次线上升级openresty中kafka版本产生的多版本兼容问题
摘要:1、最近项目规划升级kafka版本,从之前的0.11版本升级最新版本的2.4.1;升级过过程遇到了坑,特此记录一下。 背景: 项目中的有两个不同业务数据处理方式,一个是核心数据,一个用户的非核心数据,由于非核心数据的量巨大,所以项目中打算使用两个kafka集群来处理,非核心数据继续使用之前的kafk 阅读全文
posted @ 2020-07-28 20:49 小勇DW3 阅读(412) 评论(0) 推荐(0) 编辑
mysql中走与不走索引的情况汇集(待全量实验)
摘要:说明 在MySQL中,并不是你建立了索引,并且你在SQL中使用到了该列,MySQL就肯定会使用到那些索引的,有一些情况很可能在你不知不觉中,你就“成功的避开了”MySQL的所有索引。 索引列参与计算 如果where条件中age列中使用了计算,则不会使用该索引。如果需要计算,千万不要计算到索引列,想方 阅读全文
posted @ 2020-07-22 20:57 小勇DW3 阅读(6845) 评论(0) 推荐(0) 编辑
Elasticsearch深分页以及排序查询问题
摘要:Elasticsearch深分页以及排序查询问题 1.简介 ES为了避免深分页,不允许使用分页(from&size)查询10000条以后的数据,因此如果要查询第10000条以后的数据,要使用ES提供的 scroll(游标) 来查询 假设取的页数较大时(深分页),如请求第20页,Elasticsear 阅读全文
posted @ 2020-07-17 16:44 小勇DW3 阅读(4361) 评论(0) 推荐(0) 编辑