我努力使以下场景按预期工作(代码将在下面提供)。
记录我的麦克风输入并在内存中存储一个
AVAudioPCMBuffer
,这是通过AVAudioPCMBuffer
扩展方法copy(from buffer: AVAudioPCMBuffer, readOffset: AVAudioFrameCount = 默认,帧:AVAudioFrameCount = 默认)
。 我确实在录制结束时得到了缓冲区。当录制结束时,将缓冲区传递给
AKPlayer
并播放。这是一个代码片段来演示我所做的事情(我知道这不是完整的应用程序代码,如果需要我可以分享):
.
private var player: AKPlayer = AKPlayer()
self.player.buffering = .always
// in the record complete callbak:
self.player.buffer = self.bufferRecorder?.pcmBuffer
self.player.volume = 1
self.player.play()
- 请注意,电镀机连接到混音器,混音器最终连接到 AudioKit 输出。
当我检查和调试应用程序时,我可以看到缓冲区的长度正确,并且我所有的输出/输入设置都使用相同的处理格式(采样率、 channel 、比特率等)以及记录的缓冲区,但是我的应用程序仍然在这一行崩溃:
2018-10-28 08:40:32.625001+0200 BeatmanApp[71037:6731884] [avae] AVAEInternal.h:70:_AVAE_Check:
required condition is false: [AVAudioPlayerNode.mm:665:ScheduleBuffer: (_outputFormat.channelCount == buffer.format.channelCount)]
当我调试并遍历 AudioKit 代码时,我可以看到断行位于第 162 行
上的AKPlayer+Playback.swift
方法: playerNode.scheduleBuffer
更多可能有用的信息:
- 记录的缓冲区有 16 秒长。
- 当我尝试在 tap 方法中将缓冲区直接传递给播放器节点时,它似乎起作用了,我确实听到了从麦克风到扬声器的延迟,但它确实播放了。
- 我尝试在调用 play 方法之前在播放器上调用 prepare,但没有帮助
谢谢!
最佳答案
好吧,这是 super 不酷的调试 session 。我不得不调查 AVAudioEngine
以及如何在那里完成这种情况,这当然不是我想要的最终结果。这个任务帮助我理解了如何使用 AudioKit
解决它(我的应用程序有一半是使用 AudioKit
的工具实现的,因此用 重写它没有意义code>AVFoundation
).
AFFoundation
解决方案:
private let engine = AVAudioEngine()
private let bufferSize = 1024
private let p: AVAudioPlayerNode = AVAudioPlayerNode()
let audioSession = AVAudioSession.sharedInstance()
do {
try audioSession.setCategory(.playAndRecord, mode: .default, options: .defaultToSpeaker)
} catch {
print("Setting category to AVAudioSessionCategoryPlayback failed.")
}
let inputNode = self.engine.inputNode
engine.connect(inputNode, to: engine.mainMixerNode, format: inputNode.inputFormat(forBus: 0))
// !!! the following lines are the key to the solution.
// !!! the player has to be attached to the engine before actually connected
engine.attach(p)
engine.connect(p, to: engine.mainMixerNode, format: inputNode.inputFormat(forBus: 0))
do {
try engine.start()
} catch {
print("could not start engine \(error.localizedDescription)")
}
recordBufferAndPlay(duration: 4)
recordBufferAndPlay
函数:
func recordBufferAndPlay(duration: Double){
let inputNode = self.engine.inputNode
let total: Double = AVAudioSession.sharedInstance().sampleRate * duration
let totalBufferSize: UInt32 = UInt32(total)
let recordedBuffer : AVAudioPCMBuffer! = AVAudioPCMBuffer(pcmFormat: inputNode.inputFormat(forBus: 0), frameCapacity: totalBufferSize)
var alreadyRecorded = 0
inputNode.installTap(onBus: 0, bufferSize: 256, format: inputNode.inputFormat(forBus: 0)) {
(buffer: AVAudioPCMBuffer!, time: AVAudioTime!) -> Void in
recordedBuffer.copy(from: buffer) // this helper function is taken from audio kit!
alreadyRecorded = alreadyRecorded + Int(buffer.frameLength)
print(alreadyRecorded, totalBufferSize)
if(alreadyRecorded >= totalBufferSize){
inputNode.removeTap(onBus: 0)
self.p.scheduleBuffer(recordedBuffer, at: nil, options: .loops, completionHandler: {
print("completed playing")
})
self.p.play()
}
}
}
AudioKit
解决方案:
所以在 AudioKit 解决方案中,这些行应该在您的 AKPlayer 对象上调用。请注意,这应该在您实际启动引擎之前完成。
self.player.buffering = .always
AudioKit.engine.attach(self.player.playerNode)
AudioKit.engine.connect(self.player.playerNode, to: self.mixer.inputNode, format: AudioKit.engine.inputNode.outputFormat(forBus: 0))
记录的完成方式与您在 AVAudioEngine 中的完成方式非常相似,您在节点(麦克风或其他节点)上安装一个 tap 并记录 PCM 样本的缓冲区。
关于ios - 在 channelCount 条件下从缓冲区播放时 AKPlayer 崩溃,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/53029148/