【性能测试】详解Java性能调优策略
一、性能测试
Ⅰ.测试方法
- 微基准性能测试
- 可以精准定位到某个模块或者某个方法的性能问题,例如对比一个方法使用同步实现和非同步实现的性能差异
- 宏基准性能测试
- 宏基准性能测试是一个综合测试,需要考虑到测试环境、测试场景和测试目标
- 测试环境:模拟线上的真实环境
- 测试场景:在测试某个接口时,是否有其他业务的接口也在平行运行,进而造成干扰
- 测试目标
- 可以通过吞吐量和响应时间来衡量系统是否达标,如果不达标,就需要进行优化
- 如果达标,就继续加大测试的并发数,探底接口的TPS
- 除了关注接口的吞吐量和响应时间外,还需要关注CPU、内存和IO的使用率情况
Ⅱ.干扰因素
1.热身问题
①. 在Java编程语言和环境中,.java文件编译成.class文件后,需要通过解析器将字节码转换成本地机器码才能运行
②. 为了节约内存和执行效率,代码在最初被执行时,解析器会率先解析执行这段代码
③. 随着代码被执行的次数增加,当JVM发现某个方法或代码块运行得很频繁时,就会把这些代码认定为热点代码
- 为了提高热点代码的执行效率,在运行时,JVM将通过即时编译器(JIT)把这些代码编译成与本地平台相关的机器码
- 并进行各层次的优化,然后存储在内存中,之后每次运行代码时,直接从内存中获取
④. 因此在刚开始运行的阶段,JVM会花费很长的时间来全面优化代码,后面就能以最高性能运行了
2. 测试结果不稳定
①. 不稳定因素:机器其他进程的影响、网络波动、JVM GC的不确定性
①. 解决方案:通过多次测试,将测试结果求平均,只要能保证平均值在一个合理的范围之内,并且波动不大即可
3. 多JVM
①. 任意一个JVM都拥有整个系统的资源使用权
②. 如果一台机器上只部署单独的一个JVM,在做性能测试时,测试结果会很好,但一台机器上有多个JVM,则不一定
③. 尽量避免线程环境一台机器部署多个JVM
二、性能分析
1.完成性能测试之后,需要输出一份性能测试报告,测试结果需要包括
- 测试接口的吞吐量和响应时间(平均、最大、最小)
- 服务器的CPU、内存、磁盘IO、网络IO使用率、JVM的GC情况
2.通过观察性能指标,可以发现性能瓶颈,再通过自下而上的方式分析查找问题
- 首先从操作系统层面,查看系统的CPU、内存、磁盘IO、网络IO的使用率是否存在异常
- 再通过命令查找异常日志,通过分析日志,寻找导致性能瓶颈的原因
- 还可以从Java应用的JVM层面下手,查看JVM的GC频率以及内存分配情况是否存在异常
- 如果系统和JVM层面都没有出现异常情况,可以查看应用服务业务层是否存在性能瓶颈
- 例如Java编程的问题、读写数据瓶颈
3.分析查找性能问题可以采用自下而上的方式,而解决性能问题,一般采用自上而下的方式逐级优化
三、性能调优
思路: 业务调优 -> 编程调优 -> 系统调优
Ⅰ. 优化代码
1.应用层的问题代码往往会因为耗尽系统资源而暴露出来
2.例如某段代码导致内存溢出,这往往是将JVM的内存耗尽了
- 这会引发JVM频繁地发生GC,导致CPU居高不下,此时也会耗尽系统的CPU资源
3.还有一些非问题代码导致的性能问题,比较难以发现
- 例如如果对LinkedList进行for循环遍历,每次循环获取元素时,都会遍历一次list,读效率很低
- 优化方案:可以采用Iterator
Ⅱ. 优化设计
1.面向对象有很多设计模式,可以用于优化业务层以及中间件层的代码设计,进而达到精简代码和提高整体性能的目的
2.例如单例模式在频繁创建对象的场景中,可以共享一个对象,减少频繁创建和销毁对象带来的性能开销
Ⅲ. 优化算法
1.合适的算法可以大大提升系统性能
2.例如在不同的场景中,使用合适的查找算法可以降低时间复杂度
Ⅳ. 时间换空间
1.如果系统对查询的速度没有很高的要求,但对存储空间要求苛刻,可以考虑用时间换空间
2.例如String的intern方法,可以将重复率比较高的数据存储在常量池,重复使用相同的对象,大大节省内存空间
- 但由于常量池使用的是HashMap类型,如果存储数据过多,就会导致查询性能下降
Ⅴ. 空间换时间
1.使用存储空间来提升访问速度
2.例如MySQL的分库分表
Ⅵ. 参数调优
1.根据业务场景,合理地设置JVM的内存空间和GC算法
2.另外,合理地设置Web容器的线程池大小和Linux操作系统的内核参数
四、兜底策略
1.性能优化策略,主要为了提高系统性能,而兜底策略,主要为了确保系统的稳定性
2.限流
- 对系统的入口设置最大访问限制,参考性能测试中探底的接口TPS
- 同时采用熔断措施,友好地返回没有成功的请求
3.智能横向扩容
- 当访问量超过某一个阈值时,系统可以根据需求自动横向扩容
4.提前扩容
- 常用于高并发系统,例如瞬时抢购
- 此时智能横向扩容无法满足大量发生在瞬间的请求
5.Kubernetes可以实现智能横向扩容和提前扩容Docker服务