MQTT Paho Qos为0时,并发publish会出现阻塞的情况,同时后续发布一直提示Too many publishes in progress (32202)

以下为使用的paho jar包:

<!-- https://mvnrepository.com/artifact/org.eclipse.paho/org.eclipse.paho.client.mqttv3 -->
<dependency>
<groupId>org.eclipse.paho</groupId>
<artifactId>org.eclipse.paho.client.mqttv3</artifactId>
<version>1.2.0</version>
</dependency>

在项目测试的过程中测试同学发现了Too many publishes in progress (32202)的问题,发布消息时对actualInFlight 与 maxInflight两者进行判断,若actualInFlight  >= maxInflight就会抛出这个异常,这个值可以设置,但是不能解决根本问题。

同时发现快速的重复发布同一个Qos为0 的topic会出先阻塞的情况,进一步跟踪发现发布的过程中会调用Token的awitUtilSent的方法,里面调用了this.sentLock.wait()方法等待消息发完,发完之后会调用ClientState的notifySent方法,这里调用了sentLock.notifyAll(),唤醒wait(),发布完成。

Qos为0的消息存储的token的Key全部为0(后面的token会将前面的覆盖),在并发较高场景下会出现以下情况,上一条消息发送完后removeToken将后面消息的token 移除了(remove的时候是根据key remove),token被remove掉之后导致后面的消息拿不到token,无法调用notifyAll的方法,另一边的awit方法就一直阻塞。

同时发送消息时actualInFlight  会自增,发完之后notifySent方法会自减,但是这里token被remove掉导致不会调用到到这个方法,actualInFlight  只增不减,所以在后面每次发布都报这个错误。

解决方法:在新版本的jar包中修复了这个问题,将token放在了message中,且Qos为0时不会将token 存到tokenStore中,解决了token丢失的问题

新的paho依赖:

<!-- https://mvnrepository.com/artifact/org.eclipse.paho/org.eclipse.paho.client.mqttv3 -->
<dependency>
<groupId>org.eclipse.paho</groupId>
<artifactId>org.eclipse.paho.client.mqttv3</artifactId>
<version>1.2.1</version>
</dependency>

修改的地方:https://github.com/eclipse/paho.mqtt.java/pull/563/commits/cd00fa364a0d0475cb3c748de3ca8bc0ab4b7e10

 

新人不知道咋贴代码,后续有空贴出代码更直观

posted @ 2019-05-23 16:54  搬砖使我快乐。  阅读(7210)  评论(0编辑  收藏  举报