使用GPU使用OpenCV在视频的所有4个方向上搜索人脸的最有效方法是什么？

Question

我是GPU编程的新手，我首先将haarcascade_frontalface_alt.xml和视频文件传递给此已编译的示例：

https://github.com/Itseez/opencv/blob/master/samples/gpu/cascadeclassifier.cpp

将视频加载到GPU中大约需要3秒钟，然后需要2秒钟来搜索面部。 效果很好，但是可以以任何方向录制视频，因此，如果找不到面孔，我将视频旋转90度，然后重试。 问题在于，这种方法至少需要20秒才能确定是否在所有4个方向上都找到了人脸，从而确定了视频的正确方向。

是否可以执行旋转不变级联分类器来确定视频的方向？ 还是有可能无需重新加载旋转版本即可在GPU中转置视频？ 还是可以应用旋转版本的级联分类器？ 如何在所有4个方向上搜索面部，而不必将4个版本的视频加载到GPU中？

Answer 1

在计算机视觉世界中，有许多事情是可能的，但是健壮/可靠的事情很少：)。 旋转不变性不是走的路（因为有效地旋转不变性意味着旋转信息以某种方式被丢弃）。

1. 最简单的方法：GPU上的图像旋转速度非常快，因此您可以使用gpu :: rotate将每个图像上传到设备后尝试旋转它们。
2. 更快的方法：典型的方法是学习四个不同的检测器并应用所有检测器。 随着一些最新进展，检测器在检测器数量上的扩展相当不错。

但是我仍然不确定您想要实现什么。 如果您不想查找所有面孔，而是估计视频的方向（从问题的某些部分听起来很像），则只需处理所有帧的子样本并从中推断出这些内容（因为头部旋转不会引起确实是随机分布的:)）