FFmpeg 使用 avcodec_decode_video2 解码原始缓冲区

Question

我收到一个 h264 流，我至少知道一帧的大小。流进来了，因为我可以将它存储在一个文件中并使用 vlc 播放。播放文件对我来说没问题，因为我包含了 libavformat。但是 libavformat 给了我一个 AVPacket，我可以直接给 avcodec_decode_video2。在这种情况下，我得到了一个字节流。如何将原始 h264 流提供给 avcodec_decode_video2？如何将我的数据包装到 AVPacket 中。 VLC 不需要猜测任何数据。

Answer 1

解码流或多或少容易。这段代码非常适合我：

class ffmpegstreamdestination
{
public:
    ffmpegstreamdestination(AVCodecID decoder): 
    {       
        m_pCodec= avcodec_find_decoder(decoder);
        m_pCodecCtx = avcodec_alloc_context3(m_pCodec);
        avcodec_open2(m_pCodecCtx,m_pCodec,0);
        m_pFrame=avcodec_alloc_frame();
    }

    ~ffmpegstreamdestination()
    {
        av_free(m_pFrame);
        avcodec_close(m_pCodecCtx);
    }

    void decodeStreamData(unsigned char * pData, size_t sz)
    {
        AVPacket        packet;
        av_init_packet(&packet);

        packet.data=pData;
        packet.size=(int)sz;
        int framefinished=0;
        int nres=avcodec_decode_video2(m_pCodecCtx,m_pFrame,&framefinished,&packet);

        if(framefinished)
        {
                   // do the yuv magic and call a consumer
        }

        return;
    }

protected:
    AVCodecContext  *m_pCodecCtx;
    AVCodec         *m_pCodec;
    AVFrame         *m_pFrame;
};

调用 decodeStreamData 期望数据为帧。您必须在流中搜索 NAL（或多或少是一个标头幻数），它在 h264 案例 0x00000001 中。它是一帧的开始。填充 AVPacket 并没有我想象的那么成问题。如果您没有这些信息，您可以将属性保留在其中，因为它们是由 av_init_packet 初始化的。例如，只有当您有不同的帧速率时才会出现问题。

与往常一样，如果您发现错误或认为某些方法会更好地工作，我们欢迎您发送短消息。