如何通过网络发送/同步音频流

Question

我目前正在使用流式应用程序来在本地网络上流式传输本地（24 / 96、16 / 48）wav文件。

我使用循环来连续发送大量音频并模拟回放，但是在使回放在发送方和接收方之间正确同步时遇到问题。

这是循环：

-- using a block size of 192 frames
    int bufsz = 192 * bytes_per_frame;
    char buf [ bufsz ];
    int bytesread = buffer_callback (buf, bufsz);
    int bytes_per_second = bytes_per_frame * samplerate; 
    sleeptime = bytesread * 1000 / bytes_per_second * 1000;
    -- doing this to avoid gaps
    sleeptime = sleeptime - 200;
    usleep (sleeptime);

问题是：随着时间的推移会积累一些延迟。 在服务器端停止播放后，音频会在接收器端继续播放一段时间。 如何正确同步播放？ 我使用的缓冲区大小正确吗？ 睡眠时间计算正确吗？ 我想这是睡眠时间减去200所累积的吗？

提前致谢！

Answer 1

您遇到了一个非常有趣的问题：发送者和接收者可能在不同的时钟上运行。 听起来您的接收器时钟稍慢-因此您的接收器播放样本的速度不够快。 您有多种选择：

• 使用MPEG-2传输流，并使用PCR恢复发送方时钟。
• 在接收器中有一个输入队列，然后根据输入队列的上溢或下溢来对输入的音频进行上或下采样。
• 完美同步发送器和接收器时钟。

Answer 2

我已经通过用ffmpeg替换sox并使用-re标志来防止客户端收到太多来部分解决了此问题。 现在，它可以更好地同步。

Answer 3

该答案说明了您的时钟漂移问题。 因为您的音频源和音频后置设备没有共享的通用时钟，所以您将产生时钟漂移。 这是时钟晶体有些变化的时候。 如果源提供数据的速度太慢，您的接收器将继续使用数据而饿死。 如果您的源提供数据的速度过快，则可能会使接收器上的某些缓冲区溢出。 链接中的答案解释了该问题以及一些解决方法。