mysql高频率连接执行任务开销大_开启长连接与连接池复用

风瑶大大_4914

风瑶大大_4914

2026-04-02

779人浏览

原创

mysql短连接频繁创建导致cpu和time_wait激增,应改用长连接或连接池复用;php需mysqlnd驱动+pdo的p:前缀或mysqli_pconnect(),python推荐dbutils.pooleddb并正确归还连接。

mysql高频率连接执行任务开销大_开启长连接与连接池复用

MySQL 短连接频繁创建导致 CPU 和 TIME_WAIT 暴涨

每次 mysql_connect() 或 new PDO() 都会新建 TCP 连接,握手 + 认证 + 关闭,光是三次握手和四次挥手就占掉几毫秒;高并发下服务器很快堆满 TIME_WAIT 状态连接,netstat -an | grep TIME_WAIT | wc -l 轻松破万。更糟的是,MySQL 服务端要反复分配/销毁线程、初始化会话变量、加载权限——这些开销远超 SQL 执行本身。

常见错误现象:Can't create thread (errno 11)、Too many connections、监控里 Threads_created 每秒飙升、应用层报 “Connection refused” 但 max_connections 远未到上限。

  • 别用脚本循环里写 mysqli_connect() + mysqli_close() —— 这是典型短连接滥用
  • PHP-FPM 模式下,每个请求生命周期内只应建立 1 次连接(或复用已有),而不是每查一次建一次
  • Python 的 pymysql.connect() 默认也是短连接,不手动 close() 会延迟释放,但依然无法复用到下一个请求

PHP 中正确开启 MySQL 长连接(mysqlnd + persistent)

PHP 的长连接不是“连上就不关”,而是把连接放进程/线程的连接池里,供后续请求复用。关键在驱动层支持和配置方式:用 mysqlnd(PHP 5.4+ 默认)才能真正复用;libmysqlclient 的 pconnect 实现有缺陷,容易卡死或漏回收。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • DSN 中加 p: 前缀:PDO 构造时用 mysql: host=...;dbname=...;unix_socket=/tmp/mysql.sock → 改成 mysql:host=...;dbname=...;unix_socket=/tmp/mysql.sock 不行,必须是 mysql:p:host=...
  • mysqli 函数族要用 mysqli_pconnect(),不是 mysqli_connect();且不能调 mysqli_close(),否则会主动断开长连接
  • FPM worker 进程重启(如 reload 配置)才会清空其持有的长连接,所以连接数不会无限增长,但要注意 mysql.wait_timeout(默认 8 小时)和 interactive_timeout 设置,避免连接被服务端单方面 kill 后 PHP 还以为它活着

Python 用 PyMySQL / mysql-connector-python 开启连接池

Python 没有原生长连接概念,得靠连接池管理复用。PyMySQL 自带 PyMysqlPool 不推荐(维护差、bug 多),直接用 DBUtils.PooledDB 或现代方案 SQLAlchemy + QueuePool。

  • DBUtils.PooledDB 初始化时设 mincached=5, maxcached=20, maxshared=0, blocking=True —— maxshared=0 表示连接不跨线程共享(避免事务污染),blocking=True 是关键,否则取不到连接直接抛异常
  • 用完连接必须 pool.connection().close() —— 这里 close() 不是断开,而是归还给池;漏掉这句会导致连接泄露,池子慢慢耗尽
  • mysql-connector-python 的 pool_size 参数只控制最大连接数,不自动归还;必须显式调 connection.close() 才进池,且需确保 autocommit=False 时事务已提交/回滚,否则连接归还后状态残留

连接池参数调不好反而更慢

池子太小,请求排队等连接,wait_timeout 内没等到就超时;池子太大,MySQL 服务端线程数打满,Threads_running 持续高位,锁竞争加剧,响应毛刺变多。这不是“越大越好”的问题。

  • 先看业务平均 QPS 和 SQL 耗时:假设每请求平均 2 条 SQL、每条 50ms,QPS=200 → 并发连接需求 ≈ 200 × 0.05 × 2 = 20,池大小设 25–30 比较安全
  • wait_timeout 必须 > 应用最长 SQL 执行时间,否则连接中途被杀,客户端收到 Lost connection to MySQL server during query
  • 别让连接池自动 ping:有些库默认开启 ping 检活,每取一次连接都发个 SELECT 1,QPS 翻倍还测不准真实负载;改成连接归还时检测,或用 MySQL 8.0+ 的 tcp_keepalive 更轻量

连接复用这件事,核心不在“怎么连”,而在“谁负责清理、什么时候清理、清理后状态是否干净”。漏掉事务 rollback、没关 result set、连接归还前没重置字符集,都会让下一个请求踩坑。这些细节比选什么池子重要得多。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2333

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1419

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

835

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

3252

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

5548

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1219

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5811

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

5062

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

6754

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 190人学习