使用带有Tensorflow的GPU的性能不佳？

Question

我正在尝试在文本语料库（〜7M）上训练LSTM网络，但是即使在Nvidia Tesla p100上，每个历元的时间也非常长。

我的模型结构是2个LSTM层，每个层256个神经元，散布着Dropout和最后一个完全连接的层。 我将其分为64个字符的大块句子。

如此疯狂的性能下降有什么原因吗？ 每个纪元将近7.5个小时！ 可能是由于CPU计算警告引起的吗？ 我认为这不会导致GPU计算出现问题。