为 Unity 游戏同步两个 Azure Kinect

Question

我正在使用两个 Azure Kinects 在 Unity 上构建游戏。 我如何校准它们以获得身体的位置数据以解决遮挡问题？

目前我为每个人准备了两具尸体。 我如何 map 将 2 个虚拟身体（来自每个摄像头）发送给每个人？

Answer 1

您的想法很棒，因为多摄像头设置提供了一种解决方案，可以增加捕获人体的覆盖范围并最大程度地减少遮挡。

请 go 通过文档： Benefits of using multiple Azure Kinect DK devices阅读更多关于Fill in occlusions 的内容。 尽管 Azure Kinect DK 数据转换产生了单个图像，但两个摄像头（深度和 RGB）实际上相隔很小的距离。 偏移量使遮挡成为可能。 使用 Kinect SDK 从两个设备捕获深度数据并将其存储在单独的矩阵中。 使用 3D 注册算法对齐两个矩阵。 这将帮助您 map 数据从一个设备到另一个，同时考虑到每个设备的相对 position 和方向。

请参考这篇文章发表者： Nadav Eichler

使用 3D 人体姿势的多个 Kinect 相机的时空校准

引：

使用多个摄像头时，必须满足两个主要要求才能融合多个摄像头的数据：

1. 相机同步（相机时钟之间的对齐）。
2. Multi-Camera Calibration（计算相机坐标系之间的映射）。