C++ OpenCV怎么使用DNN模块加载并运行ONNX模型

胖静姑娘_1027

胖静姑娘_1027

2026-10-25

110人浏览

原创

opencv dnn 加载 onnx 模型必须用 cv::dnn::readnetfromonnx,且需 opencv 4.5+ 才支持动态轴和较新 opset;低于版本易报 resize 不支持等错误,且仅稳定支持 opset 12~13。

c++ opencv怎么使用dnn模块加载并运行onnx模型

OpenCV DNN 加载 ONNX 模型必须用 cv::dnn::readNetFromONNX

OpenCV 4.5+ 才真正支持 ONNX(尤其带动态轴、自定义算子或较新 opset 的模型),低于这个版本会报 Unsupported op 'Resize' 或 Unknown layer type。不是所有 ONNX 都能跑,OpenCV DNN 只实现了一部分 ONNX opset 子集(目前稳定支持到 opset 12~13,opset 16+ 多数 Resize/Gather/ScatterND 会失败)。

加载时别用 cv::dnn::readNet —— 它会自动尝试推断格式,但对 ONNX 常误判为 TorchScript 或出错;必须显式调用 cv::dnn::readNetFromONNX:

cv::dnn::Net net = cv::dnn::readNetFromONNX("model.onnx");

如果返回空 net.empty() == true,大概率是 ONNX 版本不兼容,先用 onnx.checker.check_model 在 Python 里验证模型有效性,再降级导出(比如 PyTorch 导出时指定 opset_version=11)。

输入预处理要手动匹配 ONNX 模型的期望格式

ONNX 模型的输入 shape 和数据类型(float32 / uint8)、归一化方式(ImageNet mean/std?0–1?-1–1?)完全由训练框架决定,OpenCV DNN 不做任何自动适配。常见坑:

  • 模型输入是 NCHW,但你给的是 NHWC(OpenCV 默认是 HWC),必须用 cv::dnn::blobFromImage 并设 swapRB=false + crop=false,再手动 cv::transpose 或用 cv::dnn::blobFromImages 的 size 参数强制 resize
  • 模型要求输入是 uint8 [0,255],但你用了 blobFromImage(..., 1.0/255.0) → 输出 float32 [0,1],直接喂进去结果全乱
  • 模型输入 shape 是 1x3x640x640,你传了 480x640 图片,没 resize 到固定尺寸就调 net.setInput → 后续 infer 报 Input blob size mismatch

查模型输入信息最靠谱的方式:用 Python + onnxruntime 打印:

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载
import onnx
model = onnx.load("model.onnx")
print(model.graph.input[0].type.tensor_type.shape)

net.forward() 返回值结构取决于模型输出层设计

ONNX 模型可能有单输出(如分类 logits)、多输出(如 YOLO 的 boxes/scores/classes)、甚至带命名的输出节点。OpenCV DNN 不解析输出名,只按拓扑顺序返回 std::vector<:mat></:mat>:

  • 若模型只有一个输出节点,net.forward() 返回长度为 1 的 vector,取 [0] 即可
  • 若模型有多个输出(如 ONNX 导出时指定了多个 output_names),需用 net.forward("output_name") 显式指定,否则 forward() 默认只返回第一个
  • YOLOv5/v8 导出的 ONNX 常把检测头合并成一个 tensor(如 1x25200x85),需要自己 reshape + 解码(非 OpenCV 内置逻辑)

别依赖 net.getUnconnectedOutLayersNames() —— 对 ONNX 模型它常返回空或错误名称,老实用模型文档或 onnxruntime 查输出名。

CPU 推理够快,但 GPU(CUDA)需额外编译且限制多

OpenCV 默认只启用 CPU backend(cv::dnn::DNN_BACKEND_OPENCV)。想用 CUDA,必须满足三个条件:

  • OpenCV 编译时启用了 WITH_CUDA=ON 且链接了 CUDA 11.2+ / cuDNN 8.2+
  • 代码中显式设置:net.setPreferableBackend(cv::dnn::DNN_BACKEND_CUDA); net.setPreferableTarget(cv::dnn::DNN_TARGET_CUDA);
  • 模型中不能含 CUDA 不支持的算子(如某些 ScatterND、Loop、DynamicQuantizeLinear)——这类模型 setPreferableBackend 后调 forward 会静默 fallback 到 CPU,也不报错

验证是否真在 GPU 上跑:加一句 std::cout ,看耗时是否显著下降;或者用 <code>nvidia-smi 观察 GPU 利用率。很多用户以为开了 CUDA 就加速了,其实一直在 CPU 跑。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

2248

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

1039

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

447

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

327

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

426

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

600

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1409

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

1217

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

1325

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习