环境信息
EMQX版本: 4.2.5
操作系统及: CentOS 7
问题描述
1. 前置条件
emqx为两个节点的集群, 使用的插件主要是emqx_auth_http. 除了一个微服务A处理emqx_auth_http插件过来的auth和acl消息,还有一个微服务B订阅所有业务Topic.
其中微服务A有8个节点,4个只处理auth消息,领外个只处理acl消息;微服务B有三个节点，每个节点有一个MQTT客户端通过11883端口连接EMQX, 通过共享订阅接收所有的业务消息, 订阅QoS为1.
整体并发量较高， auth消息一个节点并发在450，acl消息一个节点并发在350左右
2. 现象
运行较长一段时间后,发现微服务B的MQTT客户端连接被重置,断开连接,且一直重连不上, 后续把emqx前置负载关掉一段时间,重连才成功. 查看emqx日志发现,在连接首次被重置前几分钟,大量出现以下日志
3. 补充信息
- 问题出现半个月前,在emqx_auth_http插件中添加了一项配置:auth.http.pool_size=1024
- 问题出现前十分钟内，消息并发量有部分提升
疑问
- 这种现象出现的原因可能是什么? 希望能稍微详细一些.