使用 Multipeer Connectivity 在设备之间流式传输麦克风音频时遇到问题

Question

我已经成功设置了 Multipeer Connectivity 的基础知识，并且我的两个设备可以识别并作为对等设备相互连接。 但是，我在使用AVAudioPlayerNode流式传输和播放音频时遇到问题。 我在切换按钮时调用了一个StartRecording()函数，它应该打开和关闭 OutputStream。

我的一般理解是，您需要创建一个AVAudioEngine ，附加一个AVAudioPlayerNode ，将AVAudioPlayerNode连接到主混音器或输出节点（？）。 然后，从发送设备启动outputStream ，并在音频引擎的inputNode上installTap() ，它将不断发送从AVAudioPCMBuffer转换而来的字节。

在 Multipeer 函数中，一旦接收到流数据，我就会设置ViewController的inputStream ，我认为它是使用StreamDelegate函数处理的。 然后应该处理传入的字节（如果有空间）。 代码似乎可以正常运行，但很少调用.hasBytesAvailable 。 我也在两台设备上都启用了麦克风访问。

由于很难适应这篇文章中的所有代码，我创建了一个包含相关文件的公共要点。 以下是 3 个主要类的相关部分： ViewController.swift 、 MultipeerHandler.swift 、 StreamHelper.swift ：

在ViewController.swift ：

override func viewDidLoad() {
    super.viewDidLoad()
    configureAudioSession()
    audioEngine = AVAudioEngine()
    inputNode = audioEngine.inputNode
    audioFormat = AVAudioFormat(commonFormat: .pcmFormatFloat32, sampleRate: 8000, channels: 1, interleaved: false)
    multipeerSetup()
    viewSetup()
}

private func configureAudioSession() {
    do {
        try audioSession.setCategory(.playAndRecord, options: .defaultToSpeaker)
        try audioSession.setMode(.voiceChat)
        try audioSession.setActive(true)

        audioSession.requestRecordPermission() { [unowned self] (allowed: Bool) -> Void in
            DispatchQueue.main.async {
                if allowed {
                    print("allowed")
                }
            }
        }
    } catch { }
}

@objc func startRecording() throws {
    // start streaming
    if !(self.isRecording) {
        audioEngine.stop()
        let inputFormat = inputNode.inputFormat(forBus: 0)

        audioEngine.attach(audioPlayer)
        audioEngine.connect(audioPlayer, to: mainMixer, format: audioFormat)
        // audioEngine.connect(audioPlayer, to: audioPlayer.outputNode, format: inputFormat)

        do {
            if multipeerHandler.session.connectedPeers.count > 0 {
                if outputStream != nil {
                    outputStream = nil
                }

                outputStream = try multipeerHandler.session.startStream(withName: "voice", toPeer: multipeerHandler.session.connectedPeers[0])
                outputStream.schedule(in: RunLoop.main, forMode: .default)
                outputStream.delegate = self
                outputStream.open()

                inputNode.installTap(onBus: 0, bufferSize: AVAudioFrameCount(inputFormat.sampleRate/10), format: inputFormat) { (buffer: AVAudioPCMBuffer, when: AVAudioTime) in

                    let convertedFrameCount = AVAudioFrameCount((Double(buffer.frameLength) / inputFormat.sampleRate) * inputFormat.sampleRate)
                    guard let pcmBuffer = AVAudioPCMBuffer(pcmFormat: inputFormat, frameCapacity: convertedFrameCount) else {
                        print("cannot make pcm buffer")
                        return
                    }

                    print("\(#line)")

                    let bytes = StreamHelper.copyAudioBufferBytes(pcmBuffer)
                    if(self.outputStream.hasSpaceAvailable){
                        self.outputStream.write(bytes, maxLength: bytes.count)
                        print("\(#line)")
                    }
                }
                audioEngine.prepare()
                try audioEngine.start()

            } else {
                print("no peers to connect to")
            }
        } catch let error {
            print(error.localizedDescription)

        }
        self.isRecording = true
    } else {
        // stop streaming
        inputNode.removeTap(onBus: 0)
        self.isRecording = false
    }
}

在MultipeerHelper.swift ：

func session(_ session: MCSession, didReceive stream: InputStream, withName streamName: String, fromPeer peerID: MCPeerID) {
    print("didReceiveStream")
    if streamName == "voice" {
        print(#line)
        viewController.inputStream = stream
        viewController.inputStream.delegate = viewController
        viewController.inputStream.schedule(in: RunLoop.main, forMode: .default)
        viewController.inputStream.open()
    }
}

另外，重要的是要注意，我发现了很多类似的帖子，但它们有些陈旧。 以下是我用来了解正在发生的事情的一些来源：

• https://github.com/nullforlife/Multipeer-Voice-Chat/blob/master/Multipeer%20Voice%20Chat/ViewController.swift
• 使用 AVAudioEngine 重复播放音频文件
• 无法使用 AVAudioEngine 连接 AVAudioUnitEffect
• AVAudioPlayerNode 不播放声音
• 播放 AVAudioPlayerNode 时 AVAudioEngine inputNode 的格式发生变化

我再次发布了此查询的公开要点。 任何帮助将不胜感激。