Node.js - 将数据缓冲到Ffmpeg

Question

我使用Node.js和Ffmpeg来创建动画。 因为我试图避免使用第三方avi / mp4解析器，所以我决定将动画输出为原始的rgb24数据文件，然后使用某些程序将其转换为mp4文件。

我发现Ffmpeg是免费的开源软件，它可以做到这一点。 所以，我创建了一个Node.js应用程序，它分配一个大小为1920 x 1080 x 3的Buffer （宽度乘以高度乘以每个像素的字节数），然后我创建了一个渲染上下文库，最后我逐帧动画并保存每个连续帧在二进制文件中（使用fs模块）。

然后我调用Ffmpeg将其转换为mp4文件，它的效果非常好。 动画很容易制作，Ffmpeg正确地完成它的工作。

但是，唯一的问题是因为它非常慢并且在硬盘上占用空间。 我想创建很长的动画（超过一个小时）。 最终的mp4文件相对较小，但原始视频文件非常大。 每帧大约百分之九十是黑色像素，因此Ffmpeg非常好，但原始文件无法压缩，有时需要100兆字节。 此外，还有非常不必要的双重处理相同的数据。 首先，我在Node.js中处理它以将数据保存到文件，然后Ffmpeg读取它以将其转换为mp4。 有很多不必要的工作。

所以，我正在寻找一种方法（而且我很确定它有可能，但我还没有办法做到这一点）将原始视频数据（一次一帧）输出到Ffmpeg过程（没有将任何东西保存到硬盘上。

我的目标是做到以下几点：

1. 打开Ffmpeg进程
2. 在Node.js中渲染一个帧
3. 将原始字节流输出到Ffmpeg
4. 等待Ffmpeg对其进行编码并附加到mp4文件
5. 让Ffmpeg等待我的Node.js进程渲染下一帧

---

有没有办法实现它？ 我真的没有理由发布代码，因为我当前的代码与我在这里问的问题无关。 我不会遇到语法错误或实现问题 。 不，我只是不知道哪些参数传递给Ffmpeg进程以实现我已经解释过的内容。

我在文档中搜索了一下我需要传递给Ffmpeg进程的参数，以便让它从stdin而不是从文件中读取原始数据，并等到我的Node.js进程渲染下一帧（所以要禁用时间）限制）因为渲染帧可能需要超过24小时。 因此，Ffmpeg进程应该没有时间限制。 但是，我在文档中没有找到任何相关内容。

我知道如何从Node.js和类似的技术内容写入stdin，所以不需要解释它。 这里唯一的问题是：

1. 哪些参数传递给Ffmpeg？
2. 我是否需要使用一些特殊选项创建Ffmpeg进程（使用child_process ）？

---

先感谢您。 请放轻松，这是我的第一个问题！ :)

Answer 1

正如@Mulvya和@estus所建议的那样，正确的参数是-i - （从stdin启用输入）：

'use strict';

var cp = require('child_process');

var proc = cp.spawn('ffmpeg', [
  '-hide_banner',
  '-f', 'rawvideo',
  '-pix_fmt', 'rgb24',
  '-s', '2x2',
  '-i', '-',
  '1.png'
]);

proc.stdin.write(Buffer.from([
  255, 0, 0,
  0, 255, 0,
  0, 255, 255,
  255, 0, 255
]));

proc.stdin.end();

proc.stderr.pipe(process.stdout);

它产生这个图像：

它也适用于动画。

谢谢你的帮助！