c++怎么快速比较两个文本文件是否相同_memcmp与文件映射【实战】

酷墨小哥_8247

酷墨小哥_8247

2026-03-25

797人浏览

原创

最稳做法是fread+memcmp逐块比对:先用fstat/_stat校验文件大小,再以"rb"模式读取固定缓冲区(如65536字节),严格检查fread返回值,确保每次读取一致后才memcmp,避免EOF误判或CRLF干扰。

c++怎么快速比较两个文本文件是否相同_memcmp与文件映射【实战】

用 fread + memcmp 逐块比对最稳

直接读文件进内存再比,是绝大多数场景下最可控、最不容易翻车的做法。它不依赖系统 API 差异,也不怕小文件或超大文件的边界问题。

常见错误现象:memcmp 返回 0 却误判为“相同”,其实是没读完就停了(比如 fread 实际读取字节数少于预期,但没检查返回值);或者读到 EOF 后还多比了一次。

  • 必须检查 fread 的返回值,确保每次读满缓冲区(最后一次允许不满)
  • 缓冲区大小建议设为 4096 或 65536 —— 太小频繁调用开销大,太大无意义且可能分配失败
  • 两个文件长度不同,应先用 fstat 或 _stat 对比 size,不等直接返回 false
  • Windows 下注意以 "rb" 模式打开,避免 CRLF 转换干扰二进制比较
size_t buf_size = 65536;
std::vector<char> buf1(buf_size), buf2(buf_size);
while (true) {
    size_t r1 = fread(buf1.data(), 1, buf_size, f1);
    size_t r2 = fread(buf2.data(), 1, buf_size, f2);
    if (r1 != r2) return false;
    if (r1 == 0) break; // 都读完了
    if (memcmp(buf1.data(), buf2.data(), r1) != 0) return false;
}
</char>

Windows 上用 CreateFileMapping + MapViewOfFile 不一定更快

文件映射听起来很酷,但实际用于“比较是否相同”时,容易高估它的优势。它本质是让 OS 把文件页按需加载进虚拟内存,而 memcmp 一访问就会触发缺页中断 —— 这和顺序 fread 的 IO 模式差不多,甚至更重。

使用场景:只在你 already 在用内存映射做其他事(比如解析/修改),顺手加个比对才划算;否则纯为比对引入映射,得不偿失。

  • 必须用 SEC_COMMIT | PAGE_READONLY,别用 SEC_IMAGE(那是给 PE 文件的)
  • MapViewOfFile 返回 NULL 很常见 —— 文件太大、地址空间碎片、权限不足都会导致失败,不能假设成功
  • 64 位程序映射 >4GB 文件没问题,但 32 位下 MapViewOfFile 最多映射约 2GB(受用户态地址空间限制)
  • 映射后仍要自己处理文件长度不一致的情况,memcmp 不能跨映射边界乱比

std::equal 和 std::mismatch 在 C++ 中不是好选择

有人想用 STL 算法图省事,但它们默认按 char 迭代器走,每次访问一个字节 —— 对缓存极不友好,实测比 memcmp 慢 3–5 倍,尤其在大文件上。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

性能影响:现代 CPU 对 memcmp 有高度优化(SIMD、分支预测),而 std::equal 是通用模板,编译器很难替你向量化。

  • 别写 std::equal(first1, last1, first2) 去比整个文件
  • 即使包装成函数,只要底层没用 memcmp 或等效汇编,就是自降性能
  • 如果非要用 STL,至少确保传入的是 const char* 和长度,让编译器有机会内联 memcmp

Linux/macOS 下注意 mmap 的 MAP_PRIVATE 陷阱

用 mmap 映射只读文件时,若用了 MAP_PRIVATE,某些内核版本(特别是旧版 macOS)会偷偷 copy-on-write,导致第一次访问就分配物理内存 —— 看似映射成功,实际把 swap 跑满了。

正确做法是明确用 MAP_PRIVATE | MAP_POPULATE(Linux)或 MAP_NOCACHE(macOS),但更干脆的是:别映射,老实用 read() + memcmp。

  • MAP_POPULATE 可预读,但会阻塞直到所有页加载完成,对超大文件响应变差
  • mmap 失败返回 MAP_FAILED,不是 NULL,检查时别写错
  • munmap 后指针立刻失效,别拿它继续 memcmp

比对逻辑本身很简单,真正容易被忽略的是:**文件长度不等时尽早退出、每次 IO 都检查实际字节数、跨平台打开模式必须二进制**。这几个点漏掉一个,结果就不可靠。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

2023.09.22

549

3

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

2024.03.01

1698

6

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2023.09.20

2398

7

C++ 智能指针与现代内存管理
C++ 智能指针与现代内存管理

深入讲解 C++ 现代内存管理的核心工具——智能指针,涵盖 unique_ptr 独占所有权语义、shared_ptr 引用计数机制与循环引用问题、weak_ptr 弱引用的应用场景、make_unique/make_shared 工厂函数的性能优势、自定义删除器的编写、RAII 资源管理思想的实践,以及从裸指针迁移到智能指针的重构策略,帮助开发者编写安全无泄漏的现代 C++ 代码。

2026.04.23

379

31

windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.26

3419

3

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.27

2958

6

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

2023.08.01

1528

3

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2699

5

windows无法访问共享电脑
windows无法访问共享电脑

在现代社会中,共享电脑是办公室和家庭的重要组成部分。然而,有时我们可能会遇到Windows无法访问共享电脑的问题。这个问题可能会导致数据无法共享,影响工作和生活的正常进行。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.08

3350

4

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习