【问题标题】:Failed to execute: 0x80070057, when decoding video via ffmpeg with dxva2执行失败:0x80070057,使用 dxva2 通过 ffmpeg 解码视频时
【发布时间】:2016-04-08 17:44:29
【问题描述】:

我已经使用 ffmpeg 成功实现了一个视频播放器。我现在正在尝试使用硬件解码,但我遇到了几个问题。 我在这里找到了一个帖子作为起点:https://ffmpeg.org/pipermail/libav-user/2014-August/007323.html

我已更新为解码器设置必要内容的代码。更新后的代码可在此处获得:https://drive.google.com/file/d/0B5ufHdoDzA4ieVk5UVpxcDNzRHc/view?usp=sharing

这就是我使用它来初始化解码器的方式:

// Prepare the decoding context
AVCodec *codec = nullptr;
_codecContext = _avFormatContext->streams[_streamIndex]->codec;
if ((codec = avcodec_find_decoder(_codecContext->codec_id)) == 0)
{
    std::cout << "Unsupported video codec!" << std::endl;
    return false;
}

_codecContext->thread_count = 1;  // Multithreading is apparently not compatible with hardware decoding
InputStream *ist = new InputStream();
ist->hwaccel_id = HWACCEL_AUTO;
ist->hwaccel_device = "dxva2";
ist->dec = codec;
ist->dec_ctx = _codecContext;
_codecContext->coded_width = _width;
_codecContext->coded_height = _height;

_codecContext->opaque = ist;
dxva2_init(_codecContext);

_codecContext->get_buffer2 = ist->hwaccel_get_buffer;
_codecContext->get_format = GetHwFormat;
_codecContext->thread_safe_callbacks = 1;

if (avcodec_open2(_codecContext, codec, nullptr) < 0)
{
    std::cout << "Video codec open error" << std::endl;
    return false;
}

这里是上面引用的GetHwFormat的定义:

AVPixelFormat GetHwFormat(AVCodecContext *s, const AVPixelFormat *pix_fmts)
{
    InputStream* ist = (InputStream*)s->opaque;
    ist->active_hwaccel_id = HWACCEL_DXVA2;
    ist->hwaccel_pix_fmt = AV_PIX_FMT_DXVA2_VLD;
    return ist->hwaccel_pix_fmt;
}

当我打开一个高清或更低分辨率的 mp4(以 h264 编码)视频时,一切似乎都运行良好。但是,当我尝试更高分辨率的视频(如 3840x2160)时,我会反复收到以下错误:

Failed to execute: 0x80070057
Hardware accelerator failed to decode picture

几秒钟后我也开始收到以下错误:

co located POCs unavailable

而且视频显示不正确:我在整个视频中看到了很多伪影,而且显示滞后。我检查了 ffmpeg 源代码中的第一个错误。似乎 IDirectXVideoDecoder_Execute 由于参数无效而失败。由于这种情况发生在 ffmpeg 中,因此我肯定缺少某些东西,但我不知道是什么。我发现与此错误相关的唯一相关帖子是由于多线程,但我在打开编解码器之前将 thread_count 设置为 1。

这个问题发生在我的主电脑上,它具有以下规格:

  • i7-4790 CPU @ 3.6GHz
  • 内存 16 GB
  • 英特尔高清显卡 4600
  • Windows 8.1

在我的第二台具有以下规格的计算机上没有发生同样的问题:

  • i7 4510U @ 2GHz
  • 内存 8 GB
  • NVIDIA GeForce GTX 750Ti
  • Windows 10

如果我在主计算机上使用 DXVAChecker,它表示我的显卡支持 DXVA2 for H264_VLD_*,我可以看到正在调用 Microsoft API(DXVA2_DecodeDeviceCreated、DXVA2_DecodeDeviceBeginFrame、DXVA2_DecodeDeviceGetBuffer、DXVA2_DecodeDeviceExecute、DXVA2_DecodeDeviceEndFrame),而我的视频正在播放。

我也没有看到有硬件解码的版本和没有硬件解码的版本之间的 GPU 使用率(在任何一台计算机上)有任何增加;但是,我确实看到 CPU 使用率有所下降(虽然没有我预期的那么多)。这也很奇怪。

请注意,我尝试了 FFmpeg 网站上提供的 Windows 版本,以及我使用 --enable-dxva2 编译的版本。我已经搜索了很多,但我找不到我做错了什么。

希望有人可以帮助我,或者给我指出一个更好的例子?

【问题讨论】:

  • 我还刚刚在 Surface Pro 3 上进行了测试,配备 i5 4300U @ 1.9GHz(4 个 CPU)、8 GB RAM、Intel HD Graphics 4400、Windows 10,视频看起来不错。没有错误消息。CPU 使用率比没有硬件解码(如上面提到的第二台计算机)少 40%。GPU 仅多 1% 或 2%(与上面提到的其他两台计算机相同)在 3840x2160 下测试相同的视频.
  • 哇,这是我在 SO 上见过的最有用和最全面的帖子之一。可惜我只能投票一次(好吧,如果我数你的答案,两次;)。谢谢,起首!

标签: ffmpeg hardware decoding


【解决方案1】:

我终于找到了我的问题所在。调用avcodec_decode_video2后,我并没有像这样更新数据包的大小和数据指针:

int r = avcodec_decode_video2(_codecContext, frame, &frameDecoded, &pkt);
pkt.size -= r;
pkt.data += r;

现在,视频已正确解码,我没有任何伪影了。

另外,关于延迟,我认为这是一个单独的问题,与错误消息无关,并且由于将图像复制回 CPU 内存所需的时间。如果您需要这样做,而不是像我在上面的问题中发布的代码中那样使用 av_image_copy_plane,您可能想查看 VLC 的功能,或查看此链接 https://software.intel.com/en-us/articles/copying-accelerated-video-decode-frame-buffers。我在我的机器上做了一个快速测试,它把时间缩短了 7 或 8 倍。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2023-03-14
    • 2016-10-24
    • 2011-03-30
    • 1970-01-01
    • 2012-07-04
    • 1970-01-01
    • 2016-04-15
    • 1970-01-01
    相关资源
    最近更新 更多