Laravel怎样处理大文件分块上传_Laravel处理大文件分块上传方法【存储】

云芳君_7688

云芳君_7688

2026-04-14

288人浏览

原创

Laravel大文件分块上传需从前端分片、服务端原子写入、流式合并、Redis断点续传及自动化清理五方面实现:前端用File.slice()切片并携带SHA-256标识与序号;服务端直读HTTP body流并加锁写入临时目录;合并时调用cat命令流式拼接;Redis记录已传分片支持续传;上传后自动清理临时文件并配置Nginx client_max_body_size。

laravel怎样处理大文件分块上传_laravel处理大文件分块上传方法【存储】

如果您在Laravel中尝试上传大文件(如视频、备份包等),但遭遇超时、内存溢出或413错误,则很可能是PHP或Web服务器限制了单次请求体积,且未启用分块机制。以下是基于存储层安全、高效、可扩展的分块上传实现方法:

一、前端分片与元数据携带

该方法确保服务端能准确识别、定位和重组每个分片,避免命名冲突与覆盖,同时为断点续传提供基础支撑。关键在于将文件哈希作为核心标识符,并严格传递分片序号与总数。

1、使用File.slice()按固定大小(例如5MB)切分原始文件,生成有序分片数组。

2、计算整个文件的SHA-256哈希值,作为fileIdentifier,不依赖文件名或时间戳,防止重复上传相同内容。

3、每个分片请求携带四个必需字段:identifier(SHA-256)、chunkNumber(从0开始递增)、totalChunks(总片数)、filename(原始名称,用于最终落盘)。

4、使用fetch发送二进制流(非FormData),设置headers为{'Content-Type': 'application/octet-stream'},避免multipart解析开销。

二、服务端接收分片并原子写入临时存储

此方法绕过Laravel默认的$request->file()机制,直接读取原始HTTP body流,规避PHP内存加载整个分片的风险,同时保证写入的原子性与路径隔离。

1、定义路由POST /api/upload/chunk,控制器中校验identifier、chunkNumber、totalChunks均为非空且为整型。

2、调用$request->getContent()获取原始二进制流,禁止使用$request->file('file')——该方式会触发PHP完整解析multipart,极易OOM。

3、构造分片存储路径为storage_path("app/chunks/{$identifier}/{$chunkNumber}"),使用mkdir(..., 0755, true)确保父目录存在。

4、执行file_put_contents($filePath, $content, LOCK_EX),加独占锁防止并发写入同一分片导致损坏。

三、基于文件系统命令的流式合并(低内存占用)

该方法将合并操作交由操作系统内核处理,完全避开PHP内存加载全部分片内容,适用于GB级文件,避免Storage::put()引发的进程卡死。

1、收到客户端发起的/api/upload/merge?identifier=xxx请求后,先确认Redis中uploaded_chunks:{$identifier}计数值等于totalChunks。

2、遍历storage/app/chunks/{$identifier}/目录下所有分片文件,按chunkNumber升序排序,验证每个文件size > 0。

Laravel Cloud
Laravel Cloud

Laravel Cloud(cloud.laravel.com)。此技能用于处理所有 Laravel Cloud 请求,包括搜索和读取数据。只要任务涉及 Laravel Cloud,即使用此技能。

下载

3、拼接shell命令:cat storage/app/chunks/{$identifier}/* > storage/app/uploads/{$finalName},通过exec()或Process组件执行。

4、执行前必须确保web用户(如www-data)对chunks/和uploads/目录具有rwx权限,且磁盘剩余空间大于目标文件预期大小。

四、基于Redis状态管理的断点续传支持

该方法使上传过程具备可恢复性,客户端可在中断后查询已成功上传的分片索引,跳过重传,提升用户体验与带宽效率。

1、分片写入成功后,立即执行Redis::sAdd("uploaded_chunks:{$identifier}", $chunkNumber)记录索引。

2、提供GET /api/upload/chunks/{identifier}接口,返回JSON数组如[0,1,2,4],不查磁盘而查Redis Set,保障高并发响应速度。

3、合并完成后,执行Redis::del("uploaded_chunks:{$identifier}")清除状态键。

4、为防状态残留,所有Redis键必须设置EXPIRE,例如SETEX uploaded_chunks:abc 86400 [0,1,2]。

五、分片清理与权限校验自动化

该方法防止临时分片长期滞留磁盘造成空间耗尽,同时建立最小权限模型,降低因目录误配置引发的安全风险。

1、合并成功后,递归删除storage/app/chunks/{$identifier}/目录,使用Filesystem::deleteDirectory()而非shell rm -rf。

2、在AppServiceProvider@register()中注册artisan命令php artisan upload:cleanup,扫描chunks/下超过24小时未被合并的目录并清理。

3、部署时运行chmod -R 755 storage/app/chunks storage/app/uploads,再执行chown -R www-data:www-data storage/app/chunks storage/app/uploads。

4、Nginx配置必须包含client_max_body_size 128m;,否则分片请求在到达PHP前即被拒绝,返回413错误。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

laravel

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
laravel组件介绍
laravel组件介绍

laravel 提供了丰富的组件,包括身份验证、模板引擎、缓存、命令行工具、数据库交互、对象关系映射器、事件处理、文件操作、电子邮件发送、队列管理和数据验证。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

877

10

laravel中间件介绍
laravel中间件介绍

laravel 中间件分为五种类型:全局、路由、组、终止和自定。想了解更多laravel中间件的相关内容,可以阅读本专题下面的文章。

2024.04.09

875

9

laravel使用的设计模式有哪些
laravel使用的设计模式有哪些

laravel使用的设计模式有:1、单例模式;2、工厂方法模式;3、建造者模式;4、适配器模式;5、装饰器模式;6、策略模式;7、观察者模式。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

2508

10

thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.10

4781

7

laravel入门教程
laravel入门教程

本专题整合了laravel入门教程,想了解更多详细内容,请阅读专题下面的文章。

2025.08.05

7010

22

laravel实战教程
laravel实战教程

本专题整合了laravel实战教程,阅读专题下面的文章了解更多详细内容。

2025.08.05

4596

13

laravel面试题
laravel面试题

本专题整合了laravel面试题相关内容,阅读专题下面的文章了解更多详细内容。

2025.08.05

8629

7

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

2026.03.04

1516

29

Laravel 框架安装指南
Laravel 框架安装指南

本指南详解 Laravel 框架安装全流程,涵盖 PHP 8.1+ 环境配置、Composer 依赖管理工具安装及国内镜像源优化。重点演示使用 composer create-project 命令创建 Laravel 10/11 项目,解决常见安装错误与依赖冲突。从环境搭建到项目初始化,助您快速完成 Laravel 开发环境部署,为后续 Web 应用开发奠定基础。适合 PHP 初学者与框架迁移开发者参考。

2026.04.09

215

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
如何安装 Composer
如何安装 Composer

共1课时 | 221人学习

Composer手册
Composer手册

共0课时 | 0人学习