c++如何实现一个支持自动重试机制的文件网络下载存盘工具【实战】

云丽酱_4389

云丽酱_4389

2026-03-28

220人浏览

原创

std::filesystem::create_directories仅创建目录,不检查可写性、磁盘空间或挂载点状态,故不能替代下载前完整路径准备;需后续用is_writable等验证,并确保临时文件与目标同分区以保障rename原子性。

c++如何实现一个支持自动重试机制的文件网络下载存盘工具【实战】

为什么 std::filesystem::create_directories 不能代替下载前的路径准备

因为它的职责只是建目录,不检查父路径是否可写、磁盘是否满、挂载点是否只读。下载中途失败再重试时,如果目标目录权限突变或磁盘空间耗尽,create_directories 仍会成功返回,但后续 fopen 或 std::ofstream 会静默失败或抛异常。

实操建议:

C++ Code Review Master
C++ Code Review Master

组合式C++代码评审方案,融合静态分析、AI推理、多轮迭代评审和C++专项检查,适用于PR审查、增量代码审查、全项目评审和代码质量评分,触发词包括review cpp、cpp代码评审、C++review、代码审查。

下载
  • 调用 std::filesystem::create_directories 后,立刻用 std::filesystem::is_writable 检查目标目录(C++20);若不可用,降级尝试 access(path.c_str(), W_OK)(POSIX)或 GetFileAttributes(Windows)
  • 临时文件必须写入与最终路径同磁盘分区,否则原子性 rename 会失败——重试时得先清理残留临时文件,否则下次 rename 报 File exists
  • 不要在重试循环里反复调用 create_directories,它开销小但无意义;路径准备应只做一次,在重试逻辑外完成

如何让 libcurl 的重试真正“可控”,而不是无限卡死

默认 CURLOPT_CONNECTTIMEOUT_MS 和 CURLOPT_TIMEOUT_MS 控制的是单次请求生命周期,但网络抖动常表现为连接建立成功、传输卡在中间——此时 timeout 不触发,libcurl 会一直等下去。

实操建议:

  • 必须同时设置:CURLOPT_LOW_SPEED_LIMIT(如 1024)、CURLOPT_LOW_SPEED_TIME(如 30),否则慢速网络下重试机制形同虚设
  • CURLOPT_FAILONERROR 设为 1L,避免 HTTP 4xx/5xx 被当成成功响应吞掉,导致错误码被忽略
  • 重试间隔不能固定,要用指数退避:sleep(1 ,最大不超过 30 秒;第 1 次失败后等 1 秒,第 2 次等 2 秒,第 3 次等 4 秒……否则并发多任务时容易集体撞上服务端限流

临时文件命名和清理为什么必须用 std::tmpnam_s(Windows)或 mkstemp(Linux)

手拼 "temp_" + std::to_string(getpid()) + ".bin" 看似简单,实际会导致竞态:同一进程多次下载、或不同进程用相同 PID(容器场景常见),临时文件名冲突,write 覆盖彼此,重试时读到脏数据。

实操建议:

  • Linux 下用 mkstemp,模板字符串必须含六个 X:char tmpl[] = "/tmp/download_XXXXXX";返回 fd 直接用于 curl_easy_setopt(curl, CURLOPT_WRITEDATA, &fd)
  • Windows 下用 std::tmpnam_s + _sopen_s,避免 tmpnam 的线程不安全;生成路径后立即 _sopen_s(&fd, path, ...),防止路径生成后被其他进程占用
  • 每次重试前,先 unlink(POSIX)或 DeleteFile(Windows)旧临时文件;但注意:若上一次重试崩溃退出,临时文件可能残留,需在工具启动时扫描并清理 *.part 或 *.tmp 类型文件

重试时如何避免重复下载整个大文件

HTTP 断点续传不是默认开启的,libcurl 默认从头开始——对 500MB 文件重试 3 次,就是 1.5GB 流量白跑。

实操建议:

  • 下载前先 HEAD 请求,检查响应头是否含 Accept-Ranges: bytes;不含则放弃断点,直接全量重试
  • 本地已有临时文件时,用 std::filesystem::file_size 获取已下载字节数,设置 CURLOPT_RESUME_FROM_LARGE 并追加请求头:"Range: bytes=" + std::to_string(already_downloaded) + "-"
  • 务必校验服务器返回的 Content-Range 头是否匹配预期起始位置,否则可能是服务端忽略 Range 导致从头发包——此时应清空临时文件,降级为全量下载
重试逻辑里最易被绕过的其实是磁盘配额检查和 Range 响应验证,这两处一漏,表面能跑,实际在生产环境跑几天就因磁盘打满或文件损坏崩掉。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.26

3119

3

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.27

2678

6

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

2023.08.01

1448

3

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2459

5

windows无法访问共享电脑
windows无法访问共享电脑

在现代社会中,共享电脑是办公室和家庭的重要组成部分。然而,有时我们可能会遇到Windows无法访问共享电脑的问题。这个问题可能会导致数据无法共享,影响工作和生活的正常进行。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.08

3250

4

windows自动更新
windows自动更新

Windows操作系统的自动更新功能可以确保系统及时获取最新的补丁和安全更新,以提高系统的稳定性和安全性。然而,有时候我们可能希望暂时或永久地关闭Windows的自动更新功能。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

1537

3

windows boot manager
windows boot manager

windows boot manager无法开机的解决方法:1、系统文件损坏,使用Windows安装光盘或USB启动盘进入恢复环境,选择修复计算机,然后选择自动修复;2、引导顺序错误,进入恢复环境,选择命令提示符,输入命令"bootrec /fixboot"和"bootrec /fixmbr",然后重新启动计算机;3、硬件问题,使用硬盘检测工具进行扫描和修复;4、重装操作系统。本专题还提供其他解决

2023.08.28

2437

4

windows锁屏快捷键
windows锁屏快捷键

windows锁屏快捷键是Windows键+L、Ctrl+Alt+Del、Windows键+D、Windows键+P和Windows键+R。本专题为大家提供windows相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.30

4547

5

Window.setInterval()方法
Window.setInterval()方法

Window.setInterval() 方法的基本语法是“window.setInterval(function, delay)”,function是要重复执行的函数或代码块,delay是每次执行之间的时间间隔,以毫秒为单位。本专题为大家提供Window.setInterval()相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.31

655

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Conan 2 Essentials 免费课程
Conan 2 Essentials 免费课程

共0课时 | 0人学习

CMake 与 Conan 集成实践
CMake 与 Conan 集成实践

共0课时 | 0人学习

Conan 2 高级依赖模型介绍
Conan 2 高级依赖模型介绍

共0课时 | 0人学习