解释来自格式为 ImageFormat.Private 的 ImageReader 的数据

Question

我已经针对 ImageReader object 的表面设置了一个 ConstrainedHighSpeedCaptureSession。我的目标是捕捉一小段我想进一步处理的高 FPS 镜头（例如，寻找物体的加速度）。

HighSpeedCapture session 仅在 ImageReader 的格式设置为 ImageFormat.PRIVATE 时起作用——这是在android.hardware.camera2.utils.SurfaceUtils.checkHighSpeedSurfaceFormat中强制执行的，比较android source 。 我知道 PRIVATE 格式是特定于实现的，因此无法直接解释原始字节，但是，实现应该知道如何将此图像格式转换为某种标准格式，这正是我需要的。

目前，我只是对捕获的图像通过ImageReader.OnImageAvailable回调变得可用做出反应。

必须有一些解释 PRIVATE 格式 ImageReaders 的方法，也许数据可以在后台呈现给一些 Canvas 或不同的 Surface。

Answer 1

您可以使用Vulkan导入私有格式的图像。 您需要将 android HardwareBuffer memory 导入到 vulkan 并使用带有配置了VkExternalFormatANDROID的Y'CBCR 转换的采样器。

相信在OpenGL中应该也有类似的方法可以导入这样的图片，不过我没用过。