c++ cuda编程入门 c++如何编写在gpu上运行的代码

老伟大大_4085

老伟大大_4085

2026-04-12

815人浏览

原创

cudaerrormemoryallocation主因是显存不足或驱动异常;cudamalloc失败后未检查指针即调用cudamemcpy会导致该错误;应先用nvidia-smi查看显存占用,再做分配与拷贝。

c++ cuda编程入门 c++如何编写在gpu上运行的代码

cudaMalloc 和 cudaMemcpy 为什么总报 cudaErrorMemoryAllocation

GPU 显存是独立于主机内存的资源,cudaMalloc 分配失败最常见的原因是显存不足,而不是代码写错了。比如你在 8GB 显存卡上尝试 cudaMalloc(&d_data, 10ULL * 1024 * 1024 * 1024)(10GB),必然失败——连检查都没必要做,直接崩溃。

实操建议:

  • 用 nvidia-smi 实时看剩余显存,别依赖任务管理器
  • 分配前加检查:if (err != cudaSuccess) printf("CUDA error: %s\n", cudaGetErrorString(err));
  • cudaMemcpy 报这个错,大概率是目标指针 d_data 为 nullptr(cudaMalloc 失败后没处理就继续用了)
  • 避免在循环里反复 cudaMalloc/cudaFree,显存分配本身有开销,应复用设备内存

kernel 函数必须用 __global__ 修饰,且不能有返回值

CUDA kernel 不是普通 C++ 函数:它没有返回值、不能递归、不能调用标准库函数(如 printf 仅限设备端有限支持)、参数只能是基本类型或设备指针。写成 int my_kernel(...) 或漏掉 __global__,编译器不会报错但运行时根本不会执行——它会被当成主机函数忽略。

实操建议:

  • kernel 签名示例:__global__ void add_kernel(float* a, float* b, float* c, int n)
  • 调用时必须带执行配置:add_kernel>>(d_a, d_b, d_c, n);,少一对 >> 就是主机串行调用,毫无 GPU 加速效果
  • 所有传入 kernel 的指针都必须是设备地址(由 cudaMalloc 分配),传 h_a(主机指针)进去会导致非法内存访问
  • 调试时加 cudaDeviceSynchronize() 检查 kernel 是否异常退出,否则错误会被静默吞掉

host/device 指针混淆导致段错误或结果全零

CUDA 中主机指针和设备指针完全不兼容。把 float* h_data = new float[N]; 直接传给 kernel,或者用 memcpy(h_data, d_data, ...)(而非 cudaMemcpy),程序可能不崩溃但结果不可预测——常见表现为输出全 0、随机大数,或 cudaErrorIllegalAddress。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

实操建议:

  • 命名习惯强制区分:h_x(host)、d_x(device),避免混用
  • 拷贝方向务必写对:cudaMemcpy(d_x, h_x, size, cudaMemcpyHostToDevice) 是上传;cudaMemcpy(h_x, d_x, size, cudaMemcpyDeviceToHost) 是下载
  • 不要对 d_x 做 sizeof(d_x) 判断大小——它只是个地址,长度信息在你手里
  • 统一用 cudaMallocManaged 可规避部分混淆(统一虚拟地址),但会损失性能,仅适合原型验证

nvcc 编译命令和头文件依赖容易漏掉 -lcuda -lcudart

#include <cuda_runtime.h></cuda_runtime.h> 只是声明,链接时缺 -lcudart 会报 undefined reference to 'cudaMalloc';而调用驱动 API(如 cuInit)才需要 -lcuda。新手常把 nvcc main.cu 当成万能命令,但实际项目中混合了 .cpp 和 .cu 文件时,必须分开编译再链接。

实操建议:

  • 最简可运行命令:nvcc -o vecadd vecadd.cu(nvcc 自动链接 cudart)
  • 混合编译:先 nvcc -c vecadd.cu -o vecadd.o,再 g++ main.cpp vecadd.o -lcudart -o app
  • 检查是否真用了 GPU:运行后执行 nvidia-smi,看对应进程的 “GPU-Util” 是否跳动
  • 别用 g++ 直接编译 .cu 文件——它不认识 __global__,会当语法错误

GPU 编程真正的门槛不在语法,而在内存模型和异步执行的理解。一个 cudaMemcpy 调用背后是 PCI-E 总线传输,一次 kernel 启动涉及流调度和 warp 分配——这些细节不暴露在代码里,但每一步出错都会表现为“结果不对”或“程序卡住”,却很难定位到根源。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关专题

更多
css中float用法
css中float用法

css中float属性允许元素脱离文档流并沿其父元素边缘排列,用于创建并排列、对齐文本图像、浮动菜单边栏和重叠元素。想了解更多float的相关内容,可以阅读本专题下面的文章。

2024.04.28

6607

8

C++中int、float和double的区别
C++中int、float和double的区别

本专题整合了c++中int和double的区别,阅读专题下面的文章了解更多详细内容。

2025.10.23

764

4

scripterror怎么解决
scripterror怎么解决

scripterror的解决办法有检查语法、文件路径、检查网络连接、浏览器兼容性、使用try-catch语句、使用开发者工具进行调试、更新浏览器和JavaScript库或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

989

5

500error怎么解决
500error怎么解决

500error的解决办法有检查服务器日志、检查代码、检查服务器配置、更新软件版本、重新启动服务、调试代码和寻求帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.25

2960

5

printf用法大全
printf用法大全

php中文网为大家提供printf用法大全,以及其他printf函数的相关文章、相关下载资源以及各种相关课程,供大家免费下载体验。

2023.06.20

788

5

fprintf和printf的区别
fprintf和printf的区别

fprintf和printf的区别在于输出的目标不同,printf输出到标准输出流,而fprintf输出到指定的文件流。根据需要选择合适的函数来进行输出操作。更多关于fprintf和printf的相关文章详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.28

1029

10

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

6419

3

int占多少字节
int占多少字节

int占4个字节,意味着一个int变量可以存储范围在-2,147,483,648到2,147,483,647之间的整数值,在某些情况下也可能是2个字节或8个字节,int是一种常用的数据类型,用于表示整数,需要根据具体情况选择合适的数据类型,以确保程序的正确性和性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.08.29

3125

6

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

2025.08.29

4008

10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习