高并发下 MySQL Statement Cancellation Timer 的线程数暴涨

问题描述

在线上环境,出现高并发的场景下,MySQL Statement Cancellation Timer 的线程数比较多,接收到线上预警,分析一下原因。

下图为本地模拟环境,配置比较低,问题不突出,主要是示意一下。😏😏😏

以下是 mysql 驱动,连接池,orm 框架信息

依赖信息:

  1. mysql-jdbc 8.0.24
  2. druid 1.2.8
  3. mybatis 3.4.6

环境配置信息

  1. druid 配置,全部都是默认值
  2. mybatis 配置:
scss 复制代码
@Bean
public SqlSessionFactory sqlSessionFactory(DataSource dataSource) throws Exception {
    SqlSessionFactoryBean factory = new SqlSessionFactoryBean();
    factory.setVfs(SpringBootVFS.class);
    factory.setDataSource(dataSource);
    //todo 省略其他配置
    Configuration c = new Configuration();
    c.setLogImpl(StdOutImpl.class);
    c.setDefaultStatementTimeout(25000);
    factory.setConfiguration(c);

    return factory.getObject();
}

产生该线程分析

  1. 找到该线程的创建的地方 NativeSession
  1. 引用关系如下
  1. 什么时候启动 enableQueryTimeouts = true
  1. 默认值是 true
  1. startQueryTime 的调用方 StatementImpl 的 executeQuery
  1. 可以发现 timeOutInMillis 不为 0 的情况下,并且 enableQueryTimeouts = true 就会创建 CanalQueryTask 然后如果超时就会自动调度

方法调用如下: com.mysql.cj.CancelQueryTaskImpl#run

处理方案

  1. 项目使用的是使用 alibaba druid

参考:github.com/alibaba/dru...

调用的是 setQueryTimeOut 方法,然后传给 timeOutInMills

如果需要取消 CancelQueryTask 需要将 validationQueryTimeout 设置为 0

2. 并且去掉 mybatis defalutStatemnetTimeOut 参数

  1. 这些都去掉了这么来处理 mysql collection timeout
  • mysql 服务器会有一个参数 wait_timeout:mysql server 关闭连接之前,允许连接闲置多少秒。默认是 28800,单位秒,即 8 个小时。
sql 复制代码
    # 分别查看全局、会话变量值
    show global VARIABLES like '%timeout%';
    show  VARIABLES like '%timeout%';
  • druid 可以通过 testOnBorrow 和 testOnReturn、testWhileIdle分别在链接获取,链接归还的时候判断是否有效。

复现和修复

测试代码

修复效果

现象 MySQL Statement Cancellation Timer 的线程不在产生

thread dump 分析工具地址:fastthread.io/

参考资料

相关推荐
顧棟9 小时前
组件生命周期设计:从硬编码初始化到状态机
java·ide
程序猿DD15 小时前
OctaFuse 2.20.0:MCP 用业务账号直接登录授权,请求日志合并工具调用
后端
特立独行的猫A17 小时前
别再用 nohup 了:让应用在后台常驻的正确姿势与 systemd 服务详解
java·后端·python
一起_java17 小时前
技术文章-基于Dify-Agent的智能问答系统设计与实现
java·spring boot·后端·agent·dify
码事漫谈18 小时前
2027年火的很可能是AI工作台
后端
Flynn Liang19 小时前
I/O 密集型高并发实战:Java 服务 10 维优化,从线程打满到 10 万 QPS
java·spring boot·性能优化·高并发·系统设计·虚拟线程·io密集型
吃我一窝jio20 小时前
Python与Go线程模型深度对比
java·开发语言·python
这个昵称不容易20 小时前
SpringBoot 购物推荐网站的设计与实现:120 个 Java 文件、147 个接口、13 张表,附真实运行截图
java·springboot·毕设
文丑颜不良啊20 小时前
LeetCode3041~3060题目解析
java·leetcode
索西引擎20 小时前
MySQL 进阶:视图、存储过程、存储函数与触发器
数据库·mysql