使用AVAudioEngine播放AVAudioPCMBuffer的音频

Question

我有两个类， MicrophoneHandler和AudioPlayer 。 我已设法使用AVCaptureSession在此处使用批准的答案来点击麦克风数据，并使用此功能将CMSampleBuffer转换为NSData ：

func sendDataToDelegate(buffer: CMSampleBuffer!)
{
    let block = CMSampleBufferGetDataBuffer(buffer)
    var length = 0
    var data: UnsafeMutablePointer<Int8> = nil

    var status = CMBlockBufferGetDataPointer(block!, 0, nil, &length, &data)    // TODO: check for errors

    let result = NSData(bytesNoCopy: data, length: length, freeWhenDone: false)

    self.delegate.handleBuffer(result)
}

我现在想通过将上面生成的NSData转换为AVAudioPCMBuffer并使用AVAudioEngine播放它来播放扬声器上的音频。 我的AudioPlayer类如下：

var engine: AVAudioEngine!
var playerNode: AVAudioPlayerNode!
var mixer: AVAudioMixerNode!

override init()
{
    super.init()

    self.setup()
    self.start()
}

func handleBuffer(data: NSData)
{
    let newBuffer = self.toPCMBuffer(data)
    print(newBuffer)

    self.playerNode.scheduleBuffer(newBuffer, completionHandler: nil)
}

func setup()
{
    self.engine = AVAudioEngine()
    self.playerNode = AVAudioPlayerNode()

    self.engine.attachNode(self.playerNode)
    self.mixer = engine.mainMixerNode

    engine.connect(self.playerNode, to: self.mixer, format: self.mixer.outputFormatForBus(0))
}

func start()
{
    do {
        try self.engine.start()
    }
    catch {
        print("error couldn't start engine")
    }

    self.playerNode.play()
}

func toPCMBuffer(data: NSData) -> AVAudioPCMBuffer
{
    let audioFormat = AVAudioFormat(commonFormat: AVAudioCommonFormat.PCMFormatFloat32, sampleRate: 8000, channels: 2, interleaved: false)  // given NSData audio format
    let PCMBuffer = AVAudioPCMBuffer(PCMFormat: audioFormat, frameCapacity: UInt32(data.length) / audioFormat.streamDescription.memory.mBytesPerFrame)

    PCMBuffer.frameLength = PCMBuffer.frameCapacity

    let channels = UnsafeBufferPointer(start: PCMBuffer.floatChannelData, count: Int(PCMBuffer.format.channelCount))

    data.getBytes(UnsafeMutablePointer<Void>(channels[0]) , length: data.length)

    return PCMBuffer
}

当在上面的第一个片段中调用self.delegate.handleBuffer(result)时，缓冲区到达handleBuffer:buffer函数。

我能够print(newBuffer) ，并查看转换后的缓冲区的内存位置，但扬声器没有任何内容。 我只能想象与NSData之间的转换之间的某些内容是不一致的。 有任何想法吗？ 提前致谢。

Answer 1

跳过原始NSData格式

为什么不一直使用AVAudioPlayer ？ 如果您soundURL需要NSData ，您始终可以从下面的soundURL加载此类数据。 在此示例中，磁盘缓冲区类似于：

let soundURL = documentDirectory.URLByAppendingPathComponent("sound.m4a")

无论如何直接记录到文件以获得最佳内存和资源管理是有意义的。 您可以通过以下方式从录制中获取NSData ：

let data = NSFileManager.defaultManager().contentsAtPath(soundURL.path())

您只需要以下代码：

记录

if !audioRecorder.recording {
    let audioSession = AVAudioSession.sharedInstance()
    do {
        try audioSession.setActive(true)
        audioRecorder.record()
    } catch {}
}

玩

if (!audioRecorder.recording){
    do {
        try audioPlayer = AVAudioPlayer(contentsOfURL: audioRecorder.url)
        audioPlayer.play()
    } catch {}
}

设定

let audioSession = AVAudioSession.sharedInstance()
do {
    try audioSession.setCategory(AVAudioSessionCategoryPlayAndRecord)
    try audioRecorder = AVAudioRecorder(URL: self.directoryURL()!,
        settings: recordSettings)
    audioRecorder.prepareToRecord()
} catch {}

设置

let recordSettings = [AVSampleRateKey : NSNumber(float: Float(44100.0)),
    AVFormatIDKey : NSNumber(int: Int32(kAudioFormatMPEG4AAC)),
    AVNumberOfChannelsKey : NSNumber(int: 1),
    AVEncoderAudioQualityKey : NSNumber(int: Int32(AVAudioQuality.Medium.rawValue))]

---

下载Xcode项目：

你可以在这里找到这个例子。 从Swift Recipes下载完整的项目，该模型在模拟器和设备上进行记录和播放。