Laravel怎样处理批量数据插入_Laravel处理批量数据插入方法【性能】

浅浩君_7960

浅浩君_7960

2026-04-13

284人浏览

原创

laravel批量插入数据应根据规模与需求选择合适方法:一、db::table()->insert()适合结构固定的大批量写入;二、eloquent::insert()兼顾可读性与性能;三、upsert()实现幂等插入;四、artisan命令流式处理超大规模数据;五、原生sql拼接追求极限性能。

laravel怎样处理批量数据插入_laravel处理批量数据插入方法【性能】

如果您需要将大量数据写入数据库,但发现逐条 save() 耗时过长或内存溢出,则可能是由于未采用适合规模的批量插入策略。以下是处理 Laravel 批量数据插入的多种方法:

一、使用 DB::table()->insert() 直接批量写入

该方法绕过 Eloquent 模型生命周期,直接构造单条 INSERT 语句并绑定多行值,避免 N+1 查询与模型实例化开销,适用于结构固定、无需事件触发与自动填充的场景。

1、准备二维关联数组,每个子数组键名须严格对应表字段名。

2、调用 DB::table('users')->insert($data) 执行插入,其中 $data 是包含数百至数千行数据的数组。

3、若数据量超过 2000 行,需手动分块(如每 500 行为一批)以防止 SQL 包过大或事务锁表时间过长。

二、使用 Eloquent 模型的 insert() 方法

该方式仍使用模型类静态调用,但不实例化对象、不触发 creating/saving 等事件,也不执行 $casts 或访问器逻辑,仅做纯数据写入,兼顾一定可读性与性能。

1、确保模型中已定义 $fillable 属性,允许 mass assignment。

2、构建含完整字段(含 created_at 和 updated_at)的二维数组,时间戳需手动设置。

3、调用 User::insert($data) 完成写入;单次建议不超过 1000 行,超量时配合 collect($data)->chunk(500) 分批处理。

三、使用 upsert() 实现存在则更新、不存在则插入

当业务要求幂等性(如按手机号、SKU 等业务主键去重),且数据库支持 ON DUPLICATE KEY UPDATE(MySQL 8.0.19+)或 ON CONFLICT(PostgreSQL),必须先在对应字段建立唯一索引,再使用 upsert() 避免并发脏数据。

1、在目标字段(如 email 或 sku)上添加唯一索引:php artisan migrate:make add_unique_index_to_users_email 并在 up() 中执行 Schema::table(...)->unique('email')。

laravel-specialist
laravel-specialist

精通 Laravel 10+,遵循现代 PHP 实践的 Laravel 专家。擅长优雅语法、Eloquent ORM、队列系统及企业级特性...

下载

2、准备待插入数据数组,确保每行包含唯一键字段与需更新字段。

3、调用 DB::table('users')->upsert($data, ['email'], ['name', 'updated_at']),其中第二个参数为唯一匹配列,第三个参数为冲突时需更新的字段列表。

四、流式分块 + 命令行处理超大规模数据

当数据量达数十万至百万级(如导入手机号列表),Web 请求易因 memory_limit 或 max_execution_time 触发 500 错误,此时应剥离 HTTP 上下文,改用 Artisan 命令行驱动,边解析、边过滤、边插入,严格控制单批次内存占用。

1、创建命令:php artisan make:command ImportPhoneNumbers。

2、在 handle() 中使用 fopen() 逐行读取文件或 stdin 输入,每读取 1000 行即调用一次 DB::table()->insert()。

3、插入前对每行执行 trim() 与正则校验,过滤空值与非法格式,避免无效数据累积至内存。

五、原生 SQL 拼接 + 参数绑定实现极限性能

在对性能极度敏感且数据源完全可信的离线场景中,可跳过 Query Builder 抽象层,手写 INSERT INTO ... VALUES (...), (...) 格式 SQL,通过 DB::insert() 绑定参数,获得最小执行开销。

1、使用 str_repeat() 与 implode() 动态生成占位符字符串,如 (?, ?, ?) × N。

2、将所有字段值扁平化为一维数值数组,确保顺序与占位符严格对应。

3、调用 DB::insert("INSERT INTO logs (ip, url, created_at) VALUES $placeholders", $values) 执行预编译语句。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

laravel

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
laravel组件介绍
laravel组件介绍

laravel 提供了丰富的组件,包括身份验证、模板引擎、缓存、命令行工具、数据库交互、对象关系映射器、事件处理、文件操作、电子邮件发送、队列管理和数据验证。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

857

10

laravel中间件介绍
laravel中间件介绍

laravel 中间件分为五种类型:全局、路由、组、终止和自定。想了解更多laravel中间件的相关内容,可以阅读本专题下面的文章。

2024.04.09

855

9

laravel使用的设计模式有哪些
laravel使用的设计模式有哪些

laravel使用的设计模式有:1、单例模式;2、工厂方法模式;3、建造者模式;4、适配器模式;5、装饰器模式;6、策略模式;7、观察者模式。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

2508

10

thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.10

4381

7

laravel入门教程
laravel入门教程

本专题整合了laravel入门教程,想了解更多详细内容,请阅读专题下面的文章。

2025.08.05

6330

22

laravel实战教程
laravel实战教程

本专题整合了laravel实战教程,阅读专题下面的文章了解更多详细内容。

2025.08.05

4196

13

laravel面试题
laravel面试题

本专题整合了laravel面试题相关内容,阅读专题下面的文章了解更多详细内容。

2025.08.05

7869

7

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

2026.03.04

1496

29

Laravel 框架安装指南
Laravel 框架安装指南

本指南详解 Laravel 框架安装全流程,涵盖 PHP 8.1+ 环境配置、Composer 依赖管理工具安装及国内镜像源优化。重点演示使用 composer create-project 命令创建 Laravel 10/11 项目,解决常见安装错误与依赖冲突。从环境搭建到项目初始化,助您快速完成 Laravel 开发环境部署,为后续 Web 应用开发奠定基础。适合 PHP 初学者与框架迁移开发者参考。

2026.04.09

215

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
如何安装 Composer
如何安装 Composer

共1课时 | 213人学习

Composer手册
Composer手册

共0课时 | 0人学习