带有 RTX3090 的 MaskRCNN 非常慢（GPU 尖峰）

Question

我有以下问题：

我正在 RTX3090 上训练 TensorFlow 2.6 Matterport MaskRCNN-Port。 我已经安装了 CUDA 11.4 和 CUDNN。 GPU 显示在 Tensorboard 中。

当我训练时，GPU 在 0% GPU-util 上空闲，一段时间后突然飙升，处理一批图像。 CPU（64 核）预先在约 2 个核上运行 100%。

为什么有那么多空闲时间？ Tensorboard 表示没有输入管道“滞后”。

截图：

输入管道：

跟踪视图：

maskrcnn 日志：

眼镜：

Linux、RTX3090、64 核 CPU (EPYC)、CUDNN 8.0.2、CUDA 11.4.1