MediaCodec 输出的原始 H.264 流无法播放

Question

我正在创建 MediaCodec 的原始 H.264 流输出。问题是输出文件无法在 android 默认播放器（API 16）中播放。安卓怎么能导出播放器无法播放的文件，只能在PC上的VLC中播放。也许我的代码有问题？我的视频是 384x288。

public class AvcEncoder {

private MediaCodec mediaCodec;
private BufferedOutputStream outputStream;
private File f;

public AvcEncoder(int w, int h, String file_name) 
{ 
    f = new File(file_name + ".mp4");

    try {
        outputStream = new BufferedOutputStream(new FileOutputStream(f));
    } catch (Exception e){ 
        e.printStackTrace();
    }

    String key_mime = "video/avc"; //video/mp4v-es, video/3gpp, video/avc
    mediaCodec = MediaCodec.createEncoderByType(key_mime);  
    MediaFormat mediaFormat = MediaFormat.createVideoFormat(key_mime, w, h);

    mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, (w * h) << 3);
    mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 25);
    mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT, MediaCodecInfo.CodecCapabilities.COLOR_FormatYUV420SemiPlanar);
    mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);

    mediaFormat.setInteger(MediaFormat.KEY_AAC_PROFILE,MediaCodecInfo.CodecProfileLevel.MPEG4ProfileMain);
    mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    mediaCodec.start();
}

public void close() {
    try {
        mediaCodec.stop();
        mediaCodec.release();
        outputStream.flush();
        outputStream.close();
    } catch (Exception e){ 
        e.printStackTrace();
    }
}


public void offerEncoder(byte[] input) {
    try {
        ByteBuffer[] inputBuffers = mediaCodec.getInputBuffers();
        ByteBuffer[] outputBuffers = mediaCodec.getOutputBuffers();
        int inputBufferIndex = mediaCodec.dequeueInputBuffer(0);
        if (inputBufferIndex >= 0) {
            ByteBuffer inputBuffer = inputBuffers[inputBufferIndex];
            inputBuffer.clear();
            inputBuffer.put(input);
            mediaCodec.queueInputBuffer(inputBufferIndex, 0, input.length, 0, 0);
        }

        MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo();
        int outputBufferIndex = mediaCodec.dequeueOutputBuffer(bufferInfo, 0);
        while (outputBufferIndex >= 0) {
            ByteBuffer outputBuffer = outputBuffers[outputBufferIndex];
            byte[] outData = new byte[bufferInfo.size];
            outputBuffer.get(outData);
            outputStream.write(outData, 0, outData.length);

            mediaCodec.releaseOutputBuffer(outputBufferIndex, false);
            outputBufferIndex = mediaCodec.dequeueOutputBuffer(bufferInfo, 0);
        }
    } catch (Throwable t) {

      }
  }
}

Answer 1

Android MediaPlayer 不处理原始 H.264 流。

此类流的一个困难是 H.264 NAL 单元没有时间戳信息，因此除非视频帧处于已知的固定帧速率，否则播放器将不知道何时呈现它们。

您可以使用MediaCodec 创建您自己的播放器（参见例如Grafika 中的“播放视频（TextureView）”），或者将原始流转换为.mp4 文件。后者需要MediaMuxer，在 API 18 中可用，或者使用 ffmpeg 等第 3 方库。