如何找到速率TP，TN，FP，FN并测量分段算法的质量？

Question

目前，我正在实施一个系统，该系统对地铁站中横穿感兴趣线路的乘客数量进行计数。 为了衡量分割算法的质量，我在地铁站的天花板上安装了摄像机，并录制了13秒的视频。

13秒的视频包含412帧。

以下是我的问题：

1. 要获得TPR（真正率），必须手动分析帧，即检查412帧中的每一帧并计算正确标记的时间？ 在FPR期间，仅算作“虚假警报”吗？

2. 为了测试每种算法，我应该使用校正滤波器吗？ 还是只是分析它们的原始形式（没有过滤器）？

3. 当您越过线路或跨越屏幕扩展时，是否可以检测到这些速率？

这是412帧的一部分

请您帮忙解决这个问题。

Answer 1

每次有人越线时，您都必须手动标记。 为了能够正确评估您的算法，这部分至关重要。

我建议您创建一个groundtruth文件，该文件列出有人越线时的所有帧索引。 您的算法输出应具有相同的类型-可以检测到线交叉的帧索引（如果您使用分段或其他技术，则不会影响评估过程）。

您应该做的最后一件事是定义一个匹配条件：如果frame_i中有一条实线交叉，并且您的算法检测到frame_j中有一条交叉，那么如果abs（frame_i-frame_j）<阈值，它将被视为真正数它将被视为误报。

Answer 2

TP，TN，FP，FN用于测量地面真实图像与系统输出之间的比较质量。 在您的项目中，您需要根据程序比较穿越线路和计算机的人数。