光流估计和视差估计有什么区别？

Question

我正在尝试了解一些计算机视觉主题。 我在这两者之间观察到的一个主要区别是，在光流中，第二张图像通常在时间 (t+1)，而在视差估计中，它通常是相同的时间步长，除非一个具有 static 视图并使用单个非立体相机。 还有其他区别及其各自的含义吗？

Answer 1

正如您所指出的，光流表示图像在时间 t 和时间 t+1 之间的像素位移，而视差估计是一个相机和另一个相机之间的像素位移。 严格来说，这两个任务可以认为是相同的。

然而，在实践中，视差是使用水平对齐的“右”和“左”相机计算的。 因此，视差仅是水平的（并且由于光学定律在单个方向上）并且可以用热图表示。

相反，光流是一个二维向量场，其中向量可以取任何值。

在机器学习中，这种区别主要改变 output 的维度（视差为 1D，光流为 2D）以预测及其规模（视差为正数，光流为所有实数）。

我希望我的回答很清楚:)