android - 使用 MediaCodec 编码时，三分之二的屏幕为绿色

Question

我正在开展一个项目，该项目需要在 Android 上使用 OpenGL 处理视频。我决定使用 MediaCodec，并在 ExtractDecodeEditEncodeMuxTest 的帮助下设法让它工作。 .结果非常好，我让它接收视频，提取轨道，解码视频轨道，使用 OpenGL 进行编辑，然后编码为视频文件。

问题是结果视频在Android上可以很好的播放，但是在iOS上，三分之二的屏幕都是绿色的。

我试着用here的建议来解决, here , 和 here ，为编码器尝试不同的格式，但问题仍然相同。

有人可以告诉我导致此问题的原因以及解决方法吗？

This is the video when it's played on iOS

这是编码器的配置

MediaCodec mediaCodec = MediaCodec.createEncoderByType("video/avc");
MediaFormat mediaFormat = MediaFormat.createVideoFormat("video/avc", 540, 960);
mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 2000000);
mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT, CodecCapabilities.COLOR_FormatSurface);
mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 1);
mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);

更新 我想知道我是否对视频方向有任何错误，因为输出视频的工作部分与所需的输出分辨率具有相同的比率，但在水平方向上。输入是垂直记录的，所需的输出也是如此。 这是解码器配置的代码:

inputFormat.setInteger(MediaFormat.KEY_WIDTH, 540);
inputFormat.setInteger(MediaFormat.KEY_HEIGHT, 960);
inputFormat.setInteger("rotation-degrees", 90);

String mime = inputFormat.getString(MediaFormat.KEY_MIME);
MediaCodec decoder = MediaCodec.createDecoderByType(mime);
decoder.configure(inputFormat, surface, null, 0);

12 月 25 日更新:我在配置编码器和解码器时尝试了不同的分辨率和方向以检查视频的方向是否有问题，但输出视频只是旋转了，绿色问题仍然存在。 我还尝试了“video/mp4v-es”作为编码器，结果视频可以在 Mac 上观看，但 iPhone 甚至无法播放。

Answer 1

我刚刚解决了它。原因原来是 MediaMuxer，它将 h264 原始流包装在某种 iOS 无法理解的容器中。因此，我没有使用 MediaMuxer，而是将原始 h264 流从编码器写入文件，并使用 mp4parser将其混合成一个 mp4 文件。