一次redis连接池连接数配置过少引起的性能问题

 

 

 

 

 

 

 

背景：一个接口，本身有一定的逻辑，但是不复杂，主要是处理数据，不涉及到数据库操作，但是内部调用两个接口。基本逻辑是先调用BI的一个接口获取到基础数据，在本地处理完数据在根据classid去业务系统查班级，查完的数据在本地处理，返回结果。其中业务系统的接口是老接口，不会存在性能问题，BI的接口是我先压测的，也没性能问题，而本地并无复杂操作，所以接口理论上是不会有性能问题的，但压测的结果却很慢。

压测过程中查看了可以看的地方，没看到异常（其实有，当时没看到），而且涉及到三个系统，没头绪的话查起来会很浪费时间，于是找开发把主要逻辑加上了时间戳。

结果如下，这是grep出时间最长的。

代码如下，主要都是redis的操作，进去看逻辑。

逻辑：

 

不一一看了，这个方法里面主要是对redis的操作，涉及到4个get和4个set，redis的性能是非常好的，之前测试一个4C的服务器，tps轻松上万，单个get或者set只有几毫秒。所以说这里不应该这么慢。看上面的时间都已经几百多毫秒。所以要看下redis的问题，找到redis配置，如下，这是spring boot 对redis连接池的配置，而且开发应该用的默认配置，明显很小，改大之后再测试。

结果如下，时间明显少了很多，服务器CPU也已经上去，tps由一百多到达了四百多。问题确定。

回过头来再看这个问题，可以明显的感觉到做性能测会代码的重要性，很多问题，在代码层很容易定位，至少很容易缩小范围。

再来看看不用代码怎么定位问题。下面这段是我打印的两次线程信息，1.txt是第一次，2.txt是第二次的线程信息，明显看到第一次中waiting有136个线程，而第二个只有61个

查看具体线程信息，明显可以看出来是在等待redis线程池。

再看下这个对比，就更明显了。第二次已经没有等待redis连接池的线程了。