CUDA线程和块说明

Question

我在这里一直在关注教程http://www.nvidia.com/docs/IO/116711/sc11-cuda-c-basics.pdf

尝试自学基本的GPU编程。 我仍然不太了解块和线程的拓扑。 在第42页上，代码定义尺寸数据如下：

#define N (2048*2048)
#define THREADS_PER_BLOCK 512

本教程是否在做假设？ 我目前正在使用配备Nvidia 520m GPU的笔记本电脑。 使用cudaDeviceProp结构，我能够确定我能够在每个块上运行1024个线程。 2048x2048确切地量化了什么？ 多少块？ 我怎么知道那是正确的？

Answer 1

N （2048 * 2048）数量是数据集的整体大小。 该问题是向量相加问题，因此要相加的向量的总大小为N元素。

每个块的线程数已在512定义。

块的数量可以从内核启动中确定：

add<<<N/THREADS_PER_BLOCK,THREADS_PER_BLOCK>>>(d_a, d_b, d_c);
       ^                          ^  
    number of blocks            number of threads in each block

因此，正在启动的网格中的块总数为2048 * 2048/512 = 8192

这些特定的参数（每块512个线程，总共8192个块）应该与任何当前可用的CUDA GPU兼容。