C++ 怎么计算两张人脸图像的余弦相似度进行身份比对

胖枫小哥_6088

胖枫小哥_6088

2026-10-26

909人浏览

原创

用OpenCV+DNN提取人脸特征向量并计算余弦相似度的关键在于:先用ONNX版ArcFace等模型提取归一化特征,再手动计算dot(a,b)/(norm(a)*norm(b)),注意对齐、预处理和阈值校准。

c++ 怎么计算两张人脸图像的余弦相似度进行身份比对

用 OpenCV + DNN 提取人脸特征向量

余弦相似度本身只是向量运算,关键在怎么拿到两张图对应的人脸特征向量。OpenCV 自带的 dnn::readNetFromTorch 或 dnn::readNetFromTensorflow 可以加载预训练的人脸嵌入模型(如 FaceNet、ArcFace 的 ONNX 或 TorchScript 版本),但注意:OpenCV 4.5+ 才较稳定支持 ONNX;低于该版本容易报 Unsupported layer type "BatchNormalization" 或输入尺寸不匹配。

实操建议:

  • 优先用 ONNX 格式的 ArcFace 模型(如 arcface_r100_v1.onnx),比旧版 FaceNet Torch 模型兼容性更好
  • 输入图像必须先做对齐:用 cv::dnn::blobFromImage 前,确保人脸已通过关键点(如 5 点)仿射变换归一化到 112×112 或 128×128(看模型要求)
  • 模型输入 blob 的 scalefactor 通常为 1.0/127.5,mean 为 (127.5, 127.5, 127.5),不是 ImageNet 的 (104,117,123)

手动实现余弦相似度计算(别用 OpenCV 的 norm)

OpenCV 的 cv::norm(a, b, NORM_L2) 算的是欧氏距离,不是余弦值。余弦相似度公式是 dot(a,b)/(norm(a)*norm(b)),必须自己算,否则结果会全在 0.3~0.7 区间漂移,无法用于阈值判断。

实操建议:

  • 用 cv::Mat::dot() 计算点积,它默认按通道展开为一维向量再点乘
  • 用 cv::norm(feature, NORM_L2) 分别算两个向量模长,别用 cv::magnitude()
  • 如果特征向量是 float32 类型但 shape 为 (1, 512),先 feature = feature.reshape(1, 512) 再计算,否则 dot() 可能返回 0
  • 结果范围是 [-1, 1],实际人脸比对中正常值集中在 [0.3, 0.8],低于 0.4 基本可判为不同人

阈值设定和跨模型差异

0.5 不是通用阈值。ArcFace 模型在 LFW 上推荐阈值约 0.68,而 FaceNet 常用 0.4,同一模型在不同预处理(灰度/RGB、归一化方式)下阈值偏移可达 ±0.05。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

实操建议:

  • 不要直接抄网上“0.5 就行”——先用你自己的数据集抽 100 对同人图、100 对不同人图,统计余弦得分分布,选 ROC 曲线下面积最大处的阈值
  • 如果用 ONNX Runtime 替代 OpenCV DNN(更推荐),注意 Ort::SessionOptions::SetIntraOpNumThreads(1) 避免多线程导致输出不稳定
  • 两张图光照、姿态差异大时,余弦值可能低于 0.35,这时单纯提高阈值没用,得加活体检测或重采样对齐

常见错误:特征未归一化就计算余弦

有些模型(如部分 PyTorch 导出的 ArcFace)输出特征**已经做过 L2 归一化**,此时分母 norm(a)*norm(b) 恒为 1,余弦值就等于点积。但如果你用的模型没归一化(比如自己训的没加 F.normalize),直接套用会导致结果偏高且不可靠。

验证方法很简单:

  • 对任一特征向量 feat,打印 cv::norm(feat, NORM_L2) —— 若非常接近 1.0(如 0.9998),说明已归一化;若为 12.3 或 45.7,则必须手动归一化后再算余弦
  • 未归一化时,错用点积当余弦,会导致“看起来相似度很高”,但换一张图就崩,尤其在小样本比对中极易误判

实际部署时最容易被忽略的是对齐质量。哪怕模型再强,眼睛位置偏移 5 像素,余弦得分就可能掉 0.1 以上。与其调阈值,不如先确保 cv::getAffineTransform 的三点定位足够稳。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

2248

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

1039

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

447

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

327

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

426

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

600

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1429

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

1237

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

1325

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习