当一个扭曲被分配给一个 SM 的一部分时，它会一直呆在那里直到该扭曲完成吗？

Question

如果我们看一下 Pascal 的 SM 架构，它由（对于 GP100）两个“处理块”组成，每个“处理块”都有一个 warp 调度程序和寄存器文件。

查看 GP102，这增加到 4 个处理块。

我的问题是，当一个扭曲被安排到一个处理块上时，它的寄存器将被分配到该处理块的寄存器文件中，所以在我看来，它需要驻留在 SM 的那个特定部分，直到扭曲完成执行。 是这样吗，或者它会被驱逐吗？

Answer 1

每个处理块（或 SM 子分区 SMSP）可以包含受架构限制的最大活动扭曲数。 在 CUDA 中，块级别没有上下文切换，因此一旦将块分配给 SM，它将驻留在那里，直到它完成执行。 这意味着分配给子分区的 warp 将驻留在那里，直到其块的所有 warp 完成执行。 如果一个经线比块中的其他经线更早完成，它将变为被动。 这是由块中的负载不平衡引起的。 当一个活动块的所有扭曲完成执行时，该块将被驱逐，资源（寄存器、共享 memory 等）将可用于分配新块。