编译 CUDA 程序的基本知识和步骤

基本工具

  1. NVCC(NVIDIA CUDA Compiler):

    • nvcc 是 NVIDIA 提供的 CUDA 编译器,用于将 CUDA 源代码(.cu 文件)编译成可执行文件或库。它可以处理 CUDA 和主机代码(例如 C++)的混合编译。
    • nvcc 调用底层的主机编译器(如 gccclang)来编译非 CUDA 代码部分。
  2. CUDA Toolkit:

    • 包含 CUDA 编译器、库、开发工具和示例代码。
    • 常见路径:/usr/local/cuda

编译步骤

  1. 编写 CUDA 源代码:

    • CUDA 程序通常由主机代码(运行在 CPU 上)和设备代码(运行在 GPU 上)组成。
    • 设备代码使用 __global____device____host__ 关键字定义内核函数。
  2. 编译 CUDA 源文件:

    • 使用 nvcc 编译 .cu 文件:

      bash 复制代码
      nvcc -o my_program my_program.cu
    • nvcc 编译 .cu 文件时,会先将主机代码部分提取并交给主机编译器(如 gcc)处理,然后将设备代码部分编译成 PTX 或 SASS 代码。

  3. 指定架构:

    • 使用 -arch 选项指定目标 GPU 的架构:

      bash 复制代码
      nvcc -arch=sm_52 -o my_program my_program.cu
  4. 优化和调试选项:

    • -O3:优化级别 3。
    • -G:生成调试信息。
    • -lineinfo:生成行号信息。
  5. 链接库:

    • 编译时需要链接 CUDA 运行时库和其他依赖库:

      -I 选项

      -I 选项用于指定头文件的搜索路径。编译器在编译源文件时需要找到所有引用的头文件,如果这些头文件不在默认的系统路径下,就需要用 -I 选项来指定路径。

      示例:

      sh 复制代码
      nvcc -I/usr/local/cuda/include my_cuda_program.cu

      这条命令告诉 nvcc/usr/local/cuda/include 目录下查找头文件。

      -L 选项

      -L 选项用于指定库文件的搜索路径。编译器在链接阶段需要找到所有引用的库文件,如果这些库文件不在默认的系统路径下,就需要用 -L 选项来指定路径。

      示例:

      sh 复制代码
      nvcc -L/usr/local/cuda/lib64 my_cuda_program.cu -lcudart

      这条命令告诉 nvcc/usr/local/cuda/lib64 目录下查找库文件。

      -l 选项

      -l 选项用于指定要链接的库文件。-l 选项后面跟的是库的名称,而不是库文件的全名。编译器会在指定的路径中查找名为 lib<name>.solib<name>.a 的文件。

      示例:

      sh 复制代码
      nvcc -L/usr/local/cuda/lib64 my_cuda_program.cu -lcudart

      这条命令告诉 nvcc 链接名为 libcudart.solibcudart.a 的库。

      综合使用上述选项的一个示例如下:

      sh 复制代码
      nvcc -I/usr/local/cuda/include -L/usr/local/cuda/lib64 -lcudart my_cuda_program.cu -o my_cuda_program

深入理解编译过程

预处理(Preprocessing)

在编译的预处理阶段,编译器会处理所有的 #include 指令,把头文件的内容插入到相应位置。这就是为什么需要用 -I 选项来指定头文件路径的原因。

编译(Compilation)

在编译阶段,编译器会把 CUDA 源文件翻译成中间表示(如 PTX 代码)。这一步的输出是目标文件(.o 文件)。

汇编(Assembly)

汇编阶段会把中间表示翻译成机器代码。这一步生成的是 GPU 可以理解的二进制代码。

链接(Linking)

链接阶段会把所有的目标文件和库文件结合起来生成最终的可执行文件。使用 -L-l 选项来指定库文件的位置和名称。

相关推荐
遥不可及~~斌1 小时前
Spring Boot RESTful API 设计指南:查询接口规范与最佳实践
spring boot·后端·restful
papership1 小时前
【入门级-C++程序设计:12、文件及基本读写-文件的基本概念&文本文件的基本操作】
开发语言·c++·青少年编程
SaleCoder2 小时前
用Python构建机器学习模型预测股票趋势:从数据到部署的实战指南
开发语言·python·机器学习·python股票预测·lstm股票模型·机器学习股票趋势
熟悉的新风景7 小时前
springboot项目或其他项目使用@Test测试项目接口配置-spring-boot-starter-test
java·spring boot·后端
玩代码7 小时前
备忘录设计模式
java·开发语言·设计模式·备忘录设计模式
技术猿188702783518 小时前
实现“micro 关键字搜索全覆盖商品”并通过 API 接口提供实时数据(一个方法)
开发语言·网络·python·深度学习·测试工具
放飞自我的Coder8 小时前
【colab 使用uv创建一个新的python版本运行】
开发语言·python·uv
晴空月明8 小时前
分布式系统高可用性设计 - 监控与日志系统
后端
艾莉丝努力练剑9 小时前
【数据结构与算法】数据结构初阶:详解顺序表和链表(四)——单链表(下)
c语言·开发语言·数据结构·学习·算法·链表
zyhomepage9 小时前
科技的成就(六十九)
开发语言·网络·人工智能·科技·内容运营