Stream static 图像到 v4l2loopback 使用带有 v4l2 插件、ffmpeg 或 gstreamer 的 obs

Question

我想将 stream 一个 static 图像发送到 android 工作室模拟器。 为此，我在 linux ubuntu 20.04 中使用 v4l2loopback v.12.5 创建了一个虚拟相机。 虚拟摄像机在 /dev/video2 中创建。 我可以使用 obs 和插件 ffmpeg 或 gstreamer 在那里 stream ，但每个人都有不同的问题。 我不在乎哪个软件可以工作……我总是使用分辨率为 1920x1080 的图像来测试它。

OBS：我在这里按照本教程安装了 obs 插件。 它解释了如何安装 v4l2loopback 并将插件添加到 obs。 该插件名为 obs-v4l2sink。 我使用以下命令启动 v4l2loopback：

sudo modprobe v4l2loopback exclusive_caps=1 video_nr=2 card_label=virtualCam

接着：

v4l2loopback-ctl set-caps "video/x-raw, format=NV12, width=1920, height=1080" "/dev/video2"

然后我也用基础 canvas 1920x1080 和 output 1920x1080 启动 Obs。 在插件中，我选择 NV12 作为视频格式，/dev/video2 作为 V4L2 设备。 图像成功发送到模拟器，但分辨率错误。 使用 ffplay 我收到此消息：

“输入#0，video4linux2，v4l2，来自'/dev/video2'：B sq= 0B f=0/0 持续时间：N/A，开始：1650.347834，比特率：27648 kb/s Stream #0:0：视频： rawvideo (NV12 / 0x3231564E), nv12, 320x240, 27648 kb/s, 30 fps, 30 tbr, 1000k tbn, 1000k tbc"

看来，分辨率缩小到 320x240，我不知道为什么。

ffmpeg：我可以 stream 使用 ffmpeg 到 /dev/video2 使用此命令：

ffmpeg -re loop 1 -i licensePlate.png -f v4l2 /dev/video2 

但我在 ffplay 中只得到错误的像素，输出如下：

[video4linux2, v4l2 @ 0x7fb494000bc0] 出队的 v4l2 缓冲区包含 118784 字节，但预期为 115200。 标志：0x00000001。

Gstreamer： Gstreamer 仅在我在 modprobe 之后不使用以下命令时才有效（如果我使用它，则管道被 Gstreamer 阻塞）：

v4l2loopback-ctl set-caps "video/x-raw, format=NV12, width=1920, height=1080" "/dev/video2"

相反，我调用这个命令：

gst-launch-1.0 -v multifilesrc location=licensePlate2.png loop=1 caps="image/png,framerate=10/1" ! pngdec ! videoscale ! videoconvert ! "video/x-raw,format=NV12,width=1920,height=1080" ! v4l2sink device=/-dev/video2

使用 ffplay 我在 1920x1080 中看到了我想要的图像，一切似乎都很好，但在 android 工作室模拟器中，我只得到一个奇怪的绿屏。 我之前得到了这个绿屏，我认为它与错误的分辨率有关。 我真的不知道这里有什么问题。 模拟器多次显示这些日志：

 emulator: ERROR: camera_device_start_capturing: Dimensions 0x0 are wrong for pixel format NV12 emulator: ERROR: _camera_client_start: Cannot start camera '/dev/video2' for NV12[0x0]: Inappropriate ioctl for device

我正在使用的 avd 是 Pixel2 1920x1080 Android 11 x86 64 ，我正在使用以下命令启动它：

./emulator -avd Pixel264 -camera-back webcam1 -no-snapshot
Pixel264 is my avd and webcam1 is the virtual webcam, that is linked to /dev/video2

Answer 1

我刚刚用 Android Studio Emulator API 28 (Google X86_ARM) 试了一下，它可以工作。 所以看起来它与模拟器的CPU架构有关，x86 64 不起作用。 不过，我需要 arm，谢天谢地，谷歌在 Api 28 中添加了 Arm 对图像的翻译。

似乎只有分辨率为 1920x1080 的图像才有效，但可能只与比例有关。

由于某种原因，Obs 现在无法正常工作，但此命令可以正常工作： ffmpeg -loop 1 -re -i licensePlate2.png -f v4l2 -vcodec rawvideo -pixfmt nv12 -vf transpose=4 /dev/video2