SpringBoot数据库连接泄露快速排查方法

2024-08-26 00:28

本文主要是介绍SpringBoot数据库连接泄露快速排查方法,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.前言

环境信息:

​ SpringBoot-2.7.6,MySql-5.7.36,使用的数据库连接池是默认的 Hikari。

现象如下:

2024-08-23 16:37:18.021 [ERROR] thread[http-nio-9095-exec-9] org.apache.juli.logging.DirectJDKLog.log-175: Servlet.service() for servlet [dispatcherServlet] in context with path [] threw exception [Request processing failed; nested exception is org.springframework.jdbc.CannotGetJdbcConnectionException: Failed to obtain JDBC Connection; nested exception is java.sql.SQLTransientConnectionException: HikariPool-1 - Connection is not available, request timed out after 30000ms.] with root cause
java.sql.SQLTransientConnectionException: HikariPool-1 - Connection is not available, request timed out after 30000ms.at com.zaxxer.hikari.pool.HikariPool.createTimeoutException(HikariPool.java:696)at com.zaxxer.hikari.pool.HikariPool.getConnection(HikariPool.java:197)at com.zaxxer.hikari.pool.HikariPool.getConnection(HikariPool.java:162)at com.zaxxer.hikari.HikariDataSource.getConnection(HikariDataSource.java:128)at org.springframework.jdbc.datasource.DataSourceUtils.fetchConnection(DataSourceUtils.java:159)at org.springframework.jdbc.datasource.DataSourceUtils.doGetConnection(DataSourceUtils.java:117)at org.springframework.jdbc.datasource.DataSourceUtils.getConnection(DataSourceUtils.java:80)at org.springframework.jdbc.core.JdbcTemplate.execute(JdbcTemplate.java:646)at org.springframework.jdbc.core.JdbcTemplate.query(JdbcTemplate.java:713)......

通过日志初步判断是:无法在指定的时间内从数据库连接池中获取可用的数据库连接,猜想数据库连接池连接已耗尽

2.小心求证猜想

思路

​ 前面猜想池中的数据库连接耗尽,需要通过某种方法实时获取数据库连接池的状态,这里推荐一种比较简单的方式,通过修改 hikari的日志级别在日志中实时查看数据库连接池状态。

笔者这里用的日志框架是 logback,修改方式是在配置文件中添加一行,如下:

<logger name="com.zaxxer.hikari" level="DEBUG"/>

修改后重启程序,发现在日志中能实时看到连接池的状态,如下:

[DEBUG] thread[HikariPool-1 housekeeper] com.zaxxer.hikari.pool.HikariPool.logPoolState-421: HikariPool-1 - Pool stats (total=10, active=10, idle=0, waiting=0)

通过大模型对日志进行分析:

这条日志信息来自于HikariCP连接池,它提供了关于HikariPool-1连接池当前状态的详细信息。下面是对这条日志信息的详细分析:

  • 日志级别[DEBUG] 表示这是一条调试级别的日志信息。调试级别的日志通常用于开发者在开发和调试过程中获取更多的运行时信息,帮助定位问题或了解系统的内部状态。
  • 线程信息thread[HikariPool-1 housekeeper] 表示这条日志是由名为HikariPool-1 housekeeper的线程产生的。在HikariCP中,每个连接池都会有一个或多个“housekeeper”线程,它们负责执行诸如连接验证、空闲连接清理等后台任务。
  • 类和方法com.zaxxer.hikari.pool.HikariPool.logPoolState-421 表示这条日志信息是由HikariPool类的logPoolState方法在源代码的第421行产生的。这提供了日志信息产生的具体位置,有助于开发者在需要时查看源代码以获取更多上下文。
  • 连接池名称HikariPool-1 是这个连接池的名称。在HikariCP中,你可以配置多个连接池,每个连接池都有一个唯一的名称。
  • 连接池状态
    • total=10:表示连接池中的总连接数为10。这是连接池能够管理的最大连接数(或当前配置的连接数)。
    • active=10:表示当前有10个连接正在被使用,即这些连接当前正在执行数据库操作。
    • idle=0:表示当前没有空闲的连接。所有连接都在使用中。
    • waiting=0:表示当前没有线程在等待获取连接。这可能是因为所有需要的连接都已经被分配,或者没有线程尝试从池中获取连接。

分析

  • 从这条日志信息可以看出,HikariPool-1连接池当前处于高负载状态,因为所有的连接都在使用中(active=10idle=0)。这通常意味着数据库操作非常频繁,或者可能存在一些长时间运行的操作占用了连接。
  • 值得注意的是,尽管所有连接都在使用中,但没有线程在等待获取连接(waiting=0)。这可能是因为当前的数据库操作足以满足应用的需求,或者应用的并发级别还没有达到需要额外连接的程度。
  • 如果应用的需求增加,或者长时间运行的操作导致连接长时间被占用,那么可能需要考虑增加连接池的总连接数(total),或者优化数据库操作以减少连接的使用时间。
  • 另外,如果waiting值开始增加,那么可能需要进一步分析为什么连接无法及时释放,或者考虑增加连接池的大小以应对更高的并发需求。

结论:数据库连接池中的连接均处于被占用的状态,即无可用的数据库连接,连接已耗尽

得到结论后,基于接口并发调用量并不高的前提,猜测导致数据库连接耗尽的原因是存在数据库连接泄露

此接口使用的是 SpringBoot中的 JdbcTemplate来访问数据库,它在执行完 SQL后是会自动释放连接的。至此,推断大概率是业务代码中有地方手动取出了数据库连接池中的连接,然后又没有释放。

3.找到可能导致数据库连接泄露的代码

常规思路

​ 人眼查看业务代码,加断点一步步调试。——慢就不说了,如果无法调试呢?

快捷思路

​ 利用 hikari提供的 leak-detection-threshold参数设置一个超时值,自动检测可能存在数据库连接泄露的代码。

​ 补充:leak-detection-threshold参数表示连接可以离开池的时间,在超过这个时间后,如果连接仍然没有被关闭,HikariCP将记录一条警告消息,表示可能存在连接泄露。

修改方法,打开 SpringBoot配置文件(Application.yml),在数据库连接配置那里添加:

leak-detection-threshold: 30000

重启程序后,果然出现了有嫌疑的代码,如下:

2024-08-24 14:54:38.012 [DEBUG] thread[http-nio-9095-exec-7] com.zaxxer.hikari.pool.HikariPool.logPoolState-421: HikariPool-1 - Timeout failure stats (total=5, active=5, idle=0, waiting=0)
java.sql.SQLTransientConnectionException: HikariPool-1 - Connection is not available, request timed out after 30001ms.at com.zaxxer.hikari.pool.HikariPool.createTimeoutException(HikariPool.java:696)at com.zaxxer.hikari.pool.HikariPool.getConnection(HikariPool.java:197)at com.zaxxer.hikari.pool.HikariPool.getConnection(HikariPool.java:162)at com.zaxxer.hikari.HikariDataSource.getConnection(HikariDataSource.java:128)at com.xx.xx.utils.DataTools.getDbType(DataTools.java:20)......

4.数据库连接泄露是如何发生的

分析问题代码:com.xx.xx.utils.DataTools.getDbType(DataTools.java:20) ,代码内容摘抄如下:

try {DatabaseMetaData dbmd = jdbcTemplate.getDataSource().getConnection().getMetaData();driverName = dbmd.getDriverName();} catch (SQLException e) {e.printStackTrace();
}

至此,找到了罪魁祸首:

jdbcTemplate.getDataSource().getConnection()

上面这段代码会从 连接池中取出数据库连接,使用完后没有还回或关闭数据库连接,故会导致数据库连接泄露。

5.总结

总结下快速排查数据库连接泄露的思路:

  1. 确定问题是数据库连接耗尽(通过修改 hikari日志级别为 DEBUG)
  2. SpringBoot配置文件增加 leak-detection-threshold(定位问题代码)
  3. 分析问题代码是否有连接泄露的可能

排查数据库连接泄露问题,除了要充分利用框架的能力,比如 hikari的 leak-detection-threshold参数。还可以把一些日志或代码可以直接交给大模型进行分析,又快又准。

这篇关于SpringBoot数据库连接泄露快速排查方法的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1107021

相关文章

检查 Nginx 是否启动的几种方法

《检查Nginx是否启动的几种方法》本文主要介绍了检查Nginx是否启动的几种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学... 目录1. 使用 systemctl 命令(推荐)2. 使用 service 命令3. 检查进程是否存在4

Java方法重载与重写之同名方法的双面魔法(最新整理)

《Java方法重载与重写之同名方法的双面魔法(最新整理)》文章介绍了Java中的方法重载Overloading和方法重写Overriding的区别联系,方法重载是指在同一个类中,允许存在多个方法名相同... 目录Java方法重载与重写:同名方法的双面魔法方法重载(Overloading):同门师兄弟的不同绝

MySQL字符串转数值的方法全解析

《MySQL字符串转数值的方法全解析》在MySQL开发中,字符串与数值的转换是高频操作,本文从隐式转换原理、显式转换方法、典型场景案例、风险防控四个维度系统梳理,助您精准掌握这一核心技能,需要的朋友可... 目录一、隐式转换:自动但需警惕的&ld编程quo;双刃剑”二、显式转换:三大核心方法详解三、典型场景

Spring配置扩展之JavaConfig的使用小结

《Spring配置扩展之JavaConfig的使用小结》JavaConfig是Spring框架中基于纯Java代码的配置方式,用于替代传统的XML配置,通过注解(如@Bean)定义Spring容器的组... 目录JavaConfig 的概念什么是JavaConfig?为什么使用 JavaConfig?Jav

Java数组动态扩容的实现示例

《Java数组动态扩容的实现示例》本文主要介绍了Java数组动态扩容的实现示例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 目录1 问题2 方法3 结语1 问题实现动态的给数组添加元素效果,实现对数组扩容,原始数组使用静态分配

Java中ArrayList与顺序表示例详解

《Java中ArrayList与顺序表示例详解》顺序表是在计算机内存中以数组的形式保存的线性表,是指用一组地址连续的存储单元依次存储数据元素的线性结构,:本文主要介绍Java中ArrayList与... 目录前言一、Java集合框架核心接口与分类ArrayList二、顺序表数据结构中的顺序表三、常用代码手动

JAVA项目swing转javafx语法规则以及示例代码

《JAVA项目swing转javafx语法规则以及示例代码》:本文主要介绍JAVA项目swing转javafx语法规则以及示例代码的相关资料,文中详细讲解了主类继承、窗口创建、布局管理、控件替换、... 目录最常用的“一行换一行”速查表(直接全局替换)实际转换示例(JFramejs → JavaFX)迁移建

Spring Boot Interceptor的原理、配置、顺序控制及与Filter的关键区别对比分析

《SpringBootInterceptor的原理、配置、顺序控制及与Filter的关键区别对比分析》本文主要介绍了SpringBoot中的拦截器(Interceptor)及其与过滤器(Filt... 目录前言一、核心功能二、拦截器的实现2.1 定义自定义拦截器2.2 注册拦截器三、多拦截器的执行顺序四、过

Python实现快速扫描目标主机的开放端口和服务

《Python实现快速扫描目标主机的开放端口和服务》这篇文章主要为大家详细介绍了如何使用Python编写一个功能强大的端口扫描器脚本,实现快速扫描目标主机的开放端口和服务,感兴趣的小伙伴可以了解下... 目录功能介绍场景应用1. 网络安全审计2. 系统管理维护3. 网络故障排查4. 合规性检查报错处理1.

MySQL快速复制一张表的四种核心方法(包括表结构和数据)

《MySQL快速复制一张表的四种核心方法(包括表结构和数据)》本文详细介绍了四种复制MySQL表(结构+数据)的方法,并对每种方法进行了对比分析,适用于不同场景和数据量的复制需求,特别是针对超大表(1... 目录一、mysql 复制表(结构+数据)的 4 种核心方法(面试结构化回答)方法 1:CREATE