记一次连接泄漏GetConnectionTimeoutException: wait millis 60000, active 20, maxActive 20, creating 0

news/2024/11/6 10:01:57/

com.alibaba.druid.pool.GetConnectionTimeoutException: wait millis 60000, active 20, maxActive 20, creating 0

活动的连接数为20, 最大的连接数为20, 活动的连接数与最大连接数相同,连接池用完了,在等待60秒后,没有新连接可用,然后超时了。

stat监控页面显示,活跃连接数很高不释放。CPU超过100%

当程序存在缺陷时,申请的连接忘记关闭,这时候,就存在连接泄漏了。

比如Connection connection = jdbcTemplate.getDataSource().getConnection(); 这样得到的连接spring不会再帮你关闭,你需要手动关闭。

1、properties配置:

#druid recycle Druid的连接回收机制
#超过时间限制是否回收
spring.datasource.druid.removeAbandoned = true
#超时时间;单位为秒。180秒=3分钟
spring.datasource.druid.removeAbandonedTimeout = 180
#关闭abanded连接时输出错误日志
spring.datasource.druid.logAbandoned = true

2、xml配置:

<!-- 超过时间限制是否回收 -->  
<property name="removeAbandoned" value="true" />  
<!-- 超时时间;单位为秒。180秒=3分钟 -->  
<property name="removeAbandonedTimeout" value="180" />  
<!-- 关闭abanded连接时输出错误日志 -->  
<property name="logAbandoned" value="true" />

此配置项会影响性能,只在排查的时候打开,系统运行时最好关闭。 

此项配日志会将连接泄漏位置打印出来,手动关闭泄露位置的连接就行了。

 

以下为错误示例就会造成连接泄漏:

public class Test5 {@Autowiredprivate JdbcTemplate jdbcTemplate;private void test() {Connection connection = null;PreparedStatement ps = null;ResultSet rs = null;try {for (int i = 0; i < 2; i++) {connection = jdbcTemplate.getDataSource().getConnection();// 第一次使用connectionps = connection.prepareStatement("select 1 from dual");rs = ps.executeQuery();while (rs.next()) {System.out.println(rs.getString(1));}// 连接connection可以一直使用,避免频繁创建connection消耗资源// ps、rs记得要关闭rs.close();ps.close();// 第二次使用connectionps = connection.prepareStatement("select 1 from dual");rs = ps.executeQuery();while (rs.next()) {System.out.println(rs.getString(1));}// 连接connection可以一直使用,避免频繁创建connection消耗资源// ps、rs记得要关闭rs.close();ps.close();// 第三次使用connectionps = connection.prepareStatement("select 1 from dual");rs = ps.executeQuery();while (rs.next()) {System.out.println(rs.getString(1));}// 连接connection可以一直使用,避免频繁创建connection消耗资源// ps、rs记得要关闭rs.close();ps.close();}} catch (Exception e) {e.printStackTrace();} finally {if (connection != null) {try {connection.close();} catch (SQLException e) {e.printStackTrace();}}}}
}

 

粗略一看没什么问题,finally最终一定会关闭连接,但是仔细看连接在for循环中打开的,实际打开了2个连接只关闭了一个,最终每调用一次该方法就会泄漏一次连接。将connection = jdbcTemplate.getDataSource().getConnection();放在循环外面就解决了。

错误示例二:

public class Test5 {@Autowiredprivate JdbcTemplate jdbcTemplate;private void test() {Connection connection = null;PreparedStatement ps = null;ResultSet rs = null;try {connection = jdbcTemplate.getDataSource().getConnection();ps = connection.prepareStatement(sql);rs = ps.executeQuery();while (rs.next()) {if (rs.getInt(1) == 1) {                    test();// 递归}}rs.close();ps.close();} catch (Exception e) {e.printStackTrace();} finally {if (connection != null) {try {connection.close();} catch (SQLException e) {e.printStackTrace();}}}}
}

递归也可能会导致,连接数不够。当递归函数需要递归很多次,只有递归结束才开始关闭连接,这期间活跃连接数陡增,若果这个函数被并发调用更恐怖。正确的做法,将connection作为递归函数的参数传递进去。

// isClosed()即使断开连接也会返回false,只有close()后才返回true。
 // isValid(1)单位秒,连接失效返回false。

if (connection == null || connection.isClosed() || !connection.isValid(1)) {
        connection = jdbcTemplate.getDataSource().getConnection();
 }

一般一个connection可以创建300个preparedstatement同时使用,一个connection最大并行299个preparedstatement,记住preparedstatement用完后要关闭,connection每创建一个preparedstatement就相当于打开一个游标,超过300个就会报connection打开游标超出最大数(ORA-01000: 超出打开游标的最大数)。每个线程的preparedstatement应该是并行运行的。

 

所以体现出来spring管理connection连接的好处,不用去关心连接是否已经手动关闭。当项目中大量使用手动维护connection连接时,成千上万代码就会难免忘记关闭connection造成泄漏。

 

 

 

 

 

Druid配置参考:https://github.com/alibaba/druid/wiki/druiddatasource%E9%85%8D%E7%BD%AE

参数配置及说明

属性说明建议值
url数据库的jdbc连接地址。一般为连接oracle/mysql。示例如下: 
 mysql : jdbc:mysql://ip:port/dbname?option1&option2&… 
 oracle : jdbc:oracle:thin:@ip:port:oracle_sid 
   
username登录数据库的用户名 
password登录数据库的用户密码 
initialSize启动程序时,在连接池中初始化多少个连接10-50已足够
maxActive连接池中最多支持多少个活动会话 
maxWait程序向连接池中请求连接时,超过maxWait的值后,认为本次请求失败,即连接池100
 没有可用连接,单位毫秒,设置-1时表示无限等待 
minEvictableIdleTimeMillis池中某个连接的空闲时长达到 N 毫秒后, 连接池在下次检查空闲连接时,将见说明部分
 回收该连接,要小于防火墙超时设置 
 net.netfilter.nf_conntrack_tcp_timeout_established的设置 
timeBetweenEvictionRunsMillis检查空闲连接的频率,单位毫秒, 非正整数时表示不进行检查 
keepAlive程序没有close连接且空闲时长超过 minEvictableIdleTimeMillis,则会执true
 行validationQuery指定的SQL,以保证该程序连接不会池kill掉,其范围不超 
 过minIdle指定的连接个数。 
minIdle回收空闲连接时,将保证至少有minIdle个连接.与initialSize相同
removeAbandoned要求程序从池中get到连接后, N 秒后必须close,否则druid 会强制回收该false,当发现程序有未
 连接,不管该连接中是活动还是空闲, 以防止进程不会进行close而霸占连接。正常close连接时设置为true
removeAbandonedTimeout设置druid 强制回收连接的时限,当程序从池中get到连接开始算起,超过此应大于业务运行最长时间
 值后,druid将强制回收该连接,单位秒。 
logAbandoned当druid强制回收连接后,是否将stack trace 记录到日志中true
testWhileIdle当程序请求连接,池在分配连接时,是否先检查该连接是否有效。(高效)true
validationQuery检查池中的连接是否仍可用的 SQL 语句,drui会连接到数据库执行该SQL, 如果 
 正常返回,则表示连接可用,否则表示连接不可用 
testOnBorrow程序 申请 连接时,进行连接有效性检查(低效,影响性能)false
testOnReturn程序 返还 连接时,进行连接有效性检查(低效,影响性能)false
poolPreparedStatements缓存通过以下两个方法发起的SQL:true
 public PreparedStatement prepareStatement(String sql) 
 public PreparedStatement prepareStatement(String sql, 
 int resultSetType, int resultSetConcurrency) 
maxPoolPrepareStatementPerConnectionSize每个连接最多缓存多少个SQL20
filters这里配置的是插件,常用的插件有:stat,wall,slf4j
 监控统计: filter:stat 
 日志监控: filter:log4j 或者 slf4j 
 防御SQL注入: filter:wall 
connectProperties连接属性。比如设置一些连接池统计方面的配置。 
 druid.stat.mergeSql=true;druid.stat.slowSqlMillis=5000 
 比如设置一些数据库连接属性: 
   

http://www.ppmy.cn/news/601600.html

相关文章

com.alibaba.druid.pool.GetConnectionTimeoutException: wait millis 60000, active 20, maxActive 20

本文目录 一、异常现象 二、异常描述 三、解决方案 3.1 properties配置文件中 3.2 xml配置文件中 四、注意事项 一、异常现象 com.alibaba.druid.pool.GetConnectionTimeoutException: wait millis 60000, active 20, maxActive 20, creating 0 二、异常描述 从异常现…

mysql 报wait millis 60000, active 0, maxActive 50, creating 0, createErrorCount 9913 错误 解决记录

1.由于在测试环境中&#xff0c;应用程序的微服务个数不是很多&#xff0c;且每个服务的连接池初始化链接数为:50,上线后一部分微服务出现大量以下的错误: com.alibaba.druid.pool.GetConnectionTimeoutException: wait millis 60000, active 0, maxActive 50, creating 0, cr…

lettuce.core.RedisCommandTimeoutException: Command timed out after 1 minute(s) timeout 60000超时问题

有一台服务器 java程序不定期会出现Redis command timed out; nested exception is io.lettuce.core.RedisCommandTimeoutException: Command timed out after 1 minute(s) 错误&#xff0c;导致应用出现 timeout 60000 错误&#xff0c;重启应用后&#xff0c;问题修复&#x…

记录一次线上事故:GetConnectionTimeoutException: wait millis 60000, active 20, maxActive 20, creating 0

前几天同事说项目出问题了&#xff0c;请求一直报错&#xff0c;我看了下服务器日志&#xff0c;发现服务器一直报错Caused by: com.alibaba.druid.pool.GetConnectionTimeoutException: wait millis 60000, active 20, maxActive 20, creating 0 大致意思是druid的连接数&…

【完美解决】- 使用JavaApI 连接查询HBASE 出现 java.net.SocketTimeoutException: callTimeout=60000

1.报错 org.apache.hadoop.hbase.client.RetriesExhaustedException: Failed after attempts36, exceptions:Tue May 28 08:16:11 CST 2019, null, java.net.SocketTimeoutException: callTimeout60000, callDuration63316: cm5 row stu01,, on table hbase:meta at regionhb…

mysql快速插入60000条数据

学习mysql 快速插入60000条数据&#xff0c;表字段&#xff08;id,name,nicheng&#xff09;主键id自增情况 昨天刚刚学习到的有一种写法: delimiter \ drop procedure if exists proc_if; CREATE PROCEDURE proc_if () BEGIN declare i int default 0; lp1 : LOOP //定义循环体…

使用springboot+easyExcel+MySQL读取并储存,60000+条数据

使用springbootmybatisPluseasyExcelMySQL读取并储存&#xff0c;60000条数据&#xff0c;15秒 闲话少说&#xff0c;直接开摆&#xff0c;记录一下最近用到的知识。 测试耗时&#xff08;ms&#xff09;读取6万条数据储存到MySQL&#xff0c;连续测试了五次&#xff0c;综合…

【数据结构OJ题】移除链表元素

移除链表元素 原题链接&#xff1a;力扣 给你一个链表的头节点 head 和一个整数 val &#xff0c;请你删除链表中所有满足 Node.val val 的节点&#xff0c;并返回新的头节点 。 方法一&#xff1a;原地删除节点 思路&#xff1a; 首先&#xff0c;定义两个指针&#xff1…