phpEnv快速导入千万级数据到MySQL phpEnv数据库导入提速方法-php教程-PHP中文网

phpEnv导入千万级数据必须调大max_allowed_packet、禁用自动提交、用原生批量INSERT或LOAD DATA INFILE，否则因默认配置保守（如packet仅4MB、memory_limit=128M）导致“MySQL server has gone away”等错误。

phpenv快速导入千万级数据到mysql phpenv数据库导入提速方法

phpEnv 环境下导入千万级数据，别指望默认配置能扛住——必须手动调大 max_allowed_packet、关掉自动提交、用原生批量 INSERT，否则不是超时就是报错。

为什么 phpEnv 导入大数据特别容易卡死或报错

phpEnv 是集成环境，MySQL 默认配置偏保守：max_allowed_packet 通常只有 4MB，PHP 脚本默认 memory_limit=128M、max_execution_time=30。而千万级数据拼成一条 INSERT，光 SQL 字符串就可能超 100MB；哪怕分批，每条语句带 500 行值 + 中文字段，也很容易触发 Packet for query is too large 或 Allowed memory size exhausted。

错误现象包括：MySQL server has gone away、Lost connection to MySQL server during query、脚本直接 500 或空白退出
根本原因不是代码写得烂，而是 phpEnv 把「开发友好」当成了「生产可用」，开箱即用的配置根本不适配大批量写入场景
你改了 PHP 配置但没同步改 MySQL 配置，照样失败——两者必须协同调整

必须改的三个 MySQL 配置项（在 phpEnv 控制面板里改）

打开 phpEnv 安装目录下的 mysqlmy.ini（不是 PHP 的 php.ini），找到并修改以下三项：

max_allowed_packet = 512M（最低设到 256M，千万级建议 512M；设太大反而可能引发其他问题）
innodb_log_file_size = 256M（提升 InnoDB 写入吞吐，避免日志频繁刷盘阻塞）
innodb_buffer_pool_size = 1G（若机器内存 ≥ 2G，可设为物理内存的 50%～70%，显著减少磁盘 I/O）

改完务必重启 phpEnv 的 MySQL 服务——只重启 Apache 或 Nginx 没用。

Mysql Skill 1.0.0 (3)

MySQL 数据库管理技能，能够通过自然语言查询和管理数据库，支持 SELECT/INSERT/UPDATE/DELETE、表管理、备份恢复等操作。当用户提及 MySQL、数据库查询、建表或数据备份时使用此技能。

下载

PHP 脚本里不能用 ActiveRecord::save() 或 foreach + exec()

Yii2/Laravel/Eloquent 等 ORM 的 save() 方法会为每条记录触发验证、事件、对象实例化，千万条 = 千万次开销。实测比原生插入慢 8～12 倍。

正确做法：用 PDO::prepare() + execute() 批量绑定，或更干脆地拼 INSERT INTO ... VALUES (...), (...), (...)
每批次控制在 500～800 行以内，避免单条 SQL 超过 max_allowed_packet
必须手动开启事务：$pdo->beginTransaction() → 循环插入 → $pdo->commit()；否则每条 INSERT 都自动提交，锁表时间翻倍
记得用 addslashes() 或 PDO::quote() 转义，别图快直接字符串拼接，中文和单引号会立刻崩

真正快的方法：LOAD DATA INFILE（但 phpEnv 默认禁用）

这是 MySQL 原生命令，比任何 PHP 循环都快——实测 900 万行 CSV 导入仅需 3～5 秒。但 phpEnv 默认关闭 local_infile，且文件路径受限。

先执行 SET GLOBAL local_infile = 1;（需 root 权限，phpEnv 自带的 root 用户可用）
确认 MySQL 启动时加了 --local-infile=1 参数（查 mysql --help | grep local-infile）
CSV 文件必须放在 MySQL 服务器本地路径（如 C:phpEnvmysqldataimportusers.csv），不能用 http:// 或 PHP 临时路径
命令示例：LOAD DATA INFILE 'C:\phpEnv\mysql\data\import\users.csv' INTO TABLE users FIELDS TERMINATED BY ',' LINES TERMINATED BY ' ' IGNORE 1 ROWS;

这个方案绕过了 PHP 内存和网络瓶颈，但要求你先把数据整理成规范 CSV——字段顺序、空值、转义、编码（务必 UTF-8 without BOM）一个都不能错，否则导入后全是乱码或截断。