将原始相机字节 [] 数组用于增强现实

Question

我正在开发一个增强现实应用程序，因此我需要捕获相机预览，为其添加视觉效果，并将其显示在屏幕上。 我想使用PreviewCallback的onPreviewFrame方法来做到这一点。 这给了我一个byte[]变量，其中包含要使用的原始图像数据（YUV420 编码）。

尽管我搜索了很多小时的解决方案，但我找不到将这个byte[]变量转换为我可以使用甚至在屏幕上绘制的任何图像格式的方法。

最好将byte[]数据转换为可用于计算和绘图的某种 RGB 格式。

有没有合适的方法来做到这一点？

Answer 1

几个月前，当我不得不对相机框架进行边缘检测时，我偶然发现了同样的问题。 这对我来说非常有效。 试试看。

public void surfaceChanged(SurfaceHolder holder,int format, int width,int height) 
        {
            camera.setPreviewCallback(new PreviewCallback() {

                public void onPreviewFrame(byte[] data, Camera camera) {

                    Camera.Parameters parameters = camera.getParameters();

                    int width = parameters.getPreviewSize().width;
                    int height = parameters.getPreviewSize().height;

                    ByteArrayOutputStream outstr = new ByteArrayOutputStream();
                    Rect rect = new Rect(0, 0, width, height); 
                    YuvImage yuvimage=new YuvImage(data,ImageFormat.NV21,width,height,null);
                    yuvimage.compressToJpeg(rect, 100, outstr);
                    Bitmap bmp = BitmapFactory.decodeByteArray(outstr.toByteArray(), 0, outstr.size());
                }
}
}

您现在可以将 bitmap 用于所有处理目的。 获取感兴趣的像素，您可以轻松地在其上进行 RGB 或 HSV 处理。

Answer 2

Imran Nazar 编写了一个关于增强现实的两部分教程，您可能会发现它很有用。 尽管他最终使用了 NDK，但第一部分和第二部分的大部分内容仅使用 Java 详细说明了您需要什么。

我相信Bitmap.createBitmap是您需要的方法。