如何在Navicat 16中调整参数以加快千万级数据还原速度

风婷同学_8625

风婷同学_8625

2026-10-21

344人浏览

原创

navicat“每批记录数”仅控制导入时sql分片粒度,设为50000可减少i/o但需配合mysql端max_allowed_packet调大、禁用sql文件中的事务封装及勾选“手动提交”才能真正提速。

如何在navicat 16中调整参数以加快千万级数据还原速度

直接调大 Navicat 16 的“每批记录数”或勾选“手动提交”就能显著提速,但必须配合 MySQL 服务端参数调整和 SQL 文件预处理,否则客户端设置再激进也会被 max_allowed_packet 或事务日志撑爆。

为什么改 Navicat 的“每批记录数”不等于提速

Navicat 默认每批 100 条 INSERT,频繁提交导致 redo log 刷盘太密;设为 50000 后单次事务变大,I/O 次数下降。但这个值不是越大越好:

  • 超过 50000 容易触发客户端内存溢出,尤其字段含 TEXT 或 BLOB
  • 若 SQL 文件里有 BEGIN/COMMIT 封装,Navicat 会降级为逐行执行,每批记录数 失效
  • 该参数只影响 INSERT,对 CREATE TABLE 或 ALTER INDEX 无作用

必须同步调大的 MySQL 服务端参数

SET GLOBAL max_allowed_packet = 512M 在 Navicat 里执行是临时的,重启 MySQL 后失效。真正生效要改配置文件:

navicatmysql
navicatmysql

Navicat For MySQL

下载
  • 确认配置路径:SHOW VARIABLES LIKE 'config_file';
  • 在 [mysqld] 段下写:max_allowed_packet = 512M(单位必须是大写 M,不能写 mb 或 512*1024*1024)
  • Linux systemd 环境优先改 /etc/mysql/mysql.conf.d/mysqld.cnf;Windows 改 C:\ProgramData\MySQL\MySQL Server X.X\my.ini
  • 顺带调大 innodb_log_file_size = 512M,避免大批量写入时日志轮转卡住

SQL 文件必须做三件事预处理

原始 mysqldump 出来的文件几乎肯定要改,否则 Navicat 会默默退化成低效模式:

  • 删掉所有 BEGIN TRANSACTION、COMMIT、DELIMITER —— 它们和 Navicat 的“手动提交”冲突
  • 用 --skip-extended-insert 重导:把 INSERT INTO t VALUES (1),(2),(3) 拆成单行,减小单语句体积,绕过 max_allowed_packet 限制
  • 拆分大文件:用 split -l 1000000 data.sql chunk_(Linux)或 Python 脚本按 INSERT 行数切分,单个文件控制在 ≤50MB

运行时关键勾选项和避坑点

在 Navicat 的「运行SQL文件」对话框里,以下设置缺一不可:

  • 勾选「手动提交(不自动提交)」:让整个文件或每一批包裹在单事务中
  • 取消勾选「每批提交」:否则它会按你设的 50000 再强制 COMMIT,白调
  • 勾选「遇到错误继续」:跳过重复主键、表已存在等非致命错误,保证流程跑到底
  • 取消勾选「执行前验证SQL语法」:超大文件解析校验极耗时,关掉后直接交由 MySQL 执行
  • 路径含中文或空格?Navicat 可能静默失败——文件名用英文+下划线,如 orders_data_202610.sql

最常被忽略的是 SQL 文件里的 BOM 头和跨文件依赖:一个没配对的 DELIMITER $$ 或中间插了 USE db_name;,Navicat 就会中断上下文,后续全变成逐行执行,速度掉回原点。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

navicat

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2293

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1399

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

815

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

3172

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

5388

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1199

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5651

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4942

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

6574

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.8万人学习