ios - 在没有 MOOV Atom 的情况下识别 MDAT Atom 中的音频样本

标签 ios objective-c audio video mp4

我正在尝试通过 iOS 设备通过 RTSP 编写实时视频广播。我正在使用 AVAssetWriter 所以我可以利用硬件编码。要通过 RTSP 发送,我必须从 MOOV block 中获取 avcC 信息,但是 MOOV block 仅在您完成 session 时从 AVAssetWriter 写入,当然这还没有完成,因为我正在直播这个。

我通过编码、写入、然后完成单个样本缓冲区到文件以及解析文件以获取 avcC 信息来解决视频的这个问题。效果很好。

在直播流之后,由于 AVAssetWriter 只会写入一个文件,所以我将它写到文件中,然后使用跟踪文件偏移量从该文件中读取。当我仅使用视频执行此操作时,我可以从书面文件中的 MDAT Atom 读取 Nalu,而无需任何 MOOV 信息,因为每个 Nalu 的大小在 Nalu 的前 4 个字节中给出。所以我可以读取该数量、处理它并通过 RTSP 流发送它。因此,只有视频,一切都运行良好,我可以将真正好的高清流传输到流服务器。

我现在遇到的问题是当我尝试将音频合并到来自麦克风的流中时。我可以使用 AVAssetWriter 对其进行很好的编码,并且我可以从中读取正确的交错格式的 mp4 文件,但是与 H264 Nalu 不同的是,文件中的音频样本没有将样本的大小作为其第一个字节。到目前为止,我能看到的唯一定义方法是使用 MOOV 中的 STSZ 和 STCO 原子,当然我没有,因为它是实时流。

考虑到所有这些,有没有人知道在没有来自 MOOV Atom 的信息的情况下识别 MDAT Atom 中的音频样本片段的方法?一旦我弄明白了,我就可以自由回家了。

提前感谢您的任何见解。

最佳答案

经过大量研究并向人们发送电子邮件后,我至少有了一个答案,答案是,我不能这样做。通常,没有索引的流中的 AAC 样本被包装在 ADTS header 中,该 header 包含数据包的长度字段。但是,由于我将 AVAssetWriter 用于音频,并且 AVAssetWriter 直接写入 MP4 文件,ADTS 包装被剥离,因为索引将在 MOOV Atom 中。

因此,我将不得不对音频进行不同的编码,可能是通过音频队列服务,并在应用于 RTSP 流时将其融合到视频数据包中。

也许这会帮助其他人在未来寻找同样的道路。

非常感谢 Geraint Davies http://www.gdcl.co.uk引导我走上正确的道路。

关于ios - 在没有 MOOV Atom 的情况下识别 MDAT Atom 中的音频样本,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/24080961/

相关文章:

objective-c - 如何检查应用程序版本并请求用户更新?

ios - 我如何在 Swift 中制作像 "Android Navigation Drawer Menu"这样的重叠菜单

ios - 在 iOS 中如何知道哪个 ibeacon 正在为它输入一些信息?

iphone - 在 UITableView 中,取消屏幕外单元格的 GCD 操作的最佳方法是什么?

ios - 从解析中检索到的数据顺序

iphone - 配置文件中的新 UDID

ios - iOS NSTimer不调用选择器-不触发

c# - 如何以编程方式确定系统设备声音设置?

python - Python TQDM进度栏阻止Winsound

matlab - 如何使用Matlab检查视频中的音频信号