我正在使用MediaCodec API 以SurfaceView 作为输出表面来解码 H264 视频流。解码器配置成功，没有任何错误。当我尝试使用releaseOutputBuffer(bufferIndex, true) 最终将解码的视频帧渲染到SurfaceView 上时，它会抛出MediaCodec.CodecException，但是视频渲染正确。
在异常对象上调用 getDiagnosticInfo() 和 getErrorCode() 返回错误代码 -34，但我在文档中找不到此错误代码的含义。文档也非常不清楚何时抛出此异常。
以前有没有人遇到过这个异常/错误代码？我该如何解决这个问题？
PS：虽然视频运行良好，但每次releaseOutputBuffer(bufferIndex, true), 调用都会引发此异常。
【问题讨论】：
标签： android video decode android-mediacodec
Android 媒体编解码器非常依赖设备供应商。三星存在令人难以置信的问题，其他运行相同代码的设备也能正常运行。这就是我过去 6 个月的生活。
尽管感觉不对，但最好的方法是尝试 + 捕获 + 重试。 MediaCodec 将在 4 个不同的地方引发异常：
注意：我的代码在 Xamarin 中，但调用映射非常接近原始 java。
配置格式描述的方式也很重要。如果您不指定，媒体编解码器可能会在 NEXUS 设备上崩溃：
formatDescription.SetInteger(MediaFormat.KeyMaxInputSize, currentPalette.Width * currentPalette.Height);
当您发现任何异常时，您需要确保媒体编解码器已重置。不幸的是，旧 api 级别无法使用重置，但您可以通过以下方式模拟相同的效果：
#region Close + Release Native Decoder
void StopAndReleaseNativeDecoder() {
FlushNativeDecoder();
StopNativeDecoder();
ReleaseNativeDecoder();
}
void FlushNativeDecoder() {
if (NativeDecoder != null) {
try {
NativeDecoder.Flush();
} catch {
// ignore
}
}
}
void StopNativeDecoder() {
if (NativeDecoder != null) {
try {
NativeDecoder.Stop();
} catch {
// ignore
}
}
}
void ReleaseNativeDecoder() {
while (NativeDecoder != null) {
try {
NativeDecoder.Release();
} catch {
// ignore
} finally {
NativeDecoder = null;
}
}
}
#endregion
一旦您在传递新输入时发现错误，您就可以检查：
if (!DroidDecoder.IsRunning && streamView != null && streamView.VideoLayer.IsAvailable) {
DroidDecoder.StartDecoder(streamView.VideoLayer.SurfaceTexture);
}
DroidDecoder.DecodeH264FrameBuffer(payload, payloadSize, frameDuration, presentationTime, isKeyFrame);
渲染到纹理视图似乎是目前最稳定的选项。但是设备碎片化确实在这方面伤害了android。我们发现 Tesco Hudl 等更便宜的设备是最稳定的视频设备。甚至 1 次屏幕上最多有 21 个并发视频。三星 S4 可以达到 4-6 左右，具体取决于分辨率/fps，但 HTC 之类的东西可以和 Hudl 一样好用。这给我敲响了警钟，让我意识到三星设备实际上是在抄袭苹果的设计，并在玩弄 android-sdk 并且实际上在此过程中破坏了很多功能。
【讨论】：
这很可能是您使用的编解码器的问题。尝试使用类似的东西来
private static MediaCodecInfo selectCodec(String mime){
int numCodecs = MediaCodecList.getCodecCount();
for(int i = 0; i < numCodecs; i++){
MediaCodecInfo codecInfo = MediaCodecList.getCodecInfoAt(i);
if(!codecInfo.isEncoder()){
continue;
}
String[] types = codecInfo.getSupportedTypes();
for(int j = 0; j < types.length; j++){
if(types[j].equalsIgnoreCase(mime)){
return codecInfo;
}
}
}
return null;
}
然后设置您的编码器：
MediaCodecInfo codecInfo = selectCodec(MIME_TYPE);
mEncoder = MediaCodec.createCodecByName(codecInfo.getName());
这可以通过确保您选择的编解码器得到完全支持来解决您的错误。
【讨论】：