將mp4文件逐幀讀入google ML Kit的inputimage

Question

我正在嘗試讀取 mp4 文件，然后使用 google ML 套件來分析姿勢和面部。 我可以使用 ffmpegframegrabber 逐幀讀取文件

FFmpegFrameGrabber frameGrabber = new FFmpegFrameGrabber(path);            frameGrabber.start();
IplImage frame;

try {
    frame = frameGrabber.grab();
} catch (Exception e) {
    e.printStackTrace();
}

現在谷歌機器學習工具包使用 inputImage 來處理所有事情。 所以問題是如何將幀轉換為輸入圖像？ 或者有沒有更好的方法來做到這一點？

我可以使用 BufferedImage

BufferedImage  bi = frame.getBufferedImage();

看起來 Android 不支持緩沖圖像。 我也沒有找到將 BufferedImage 轉換為 InputImage 的方法

Answer 1

您可以嘗試使用 MediaExtractor 獲取每一幀的字節緩沖區，然后從提取的緩沖區構建 InputImage。 https://developer.android.com/reference/android/media/MediaExtractor