如何在 Windows 中使用 H264 视频编码器 MFT 编码位图

Question

我的应用程序通过 GDI 或 DXGI 方法对捕获的帧进行编码。目前我正在使用帮助 x264 库进行编码。
AFAIK x264 是基于软件的库，我想在 GPU 的帮助下进行编码，这样可以节省 CPU 周期，希望速度也会更快。
经过搜索，我找到了一个H.264 Video Encoder MFT，它正在做h264编码。
但我回答了几个问题。
1) 它比 x264 编码库快吗？
2) 可以借助此 MFT 对位图帧进行编码吗？
- 我只见过 MFVideoFormat_I420、MFVideoFormat_IYUV、MFVideoFormat_NV12、MFVideoFormat_YUY2、MFVideoFormat_YV12 这些格式受支持
3) 它是硬件加速的（意味着它使用 CPU 或 GPU）吗？
- 最初我的理解是它使用 GPU，但在阅读这篇文章 MFT Encoder (h264) High CPU utilization 后我感到困惑。
4) H.264 Video Encoder MFT 可以单独使用而不使用 sink writer，因为我必须在网络上发送数据？
5）Windows中还有其他选择吗？

可能有些问题很傻，请随时编辑。

Answer 1

Media Foundation H.264 视频编码器是软件编码器。根据我的 [主观] 经验，它比 x264 慢，也许更重要的是，x264 提供了更广泛的设置，特别是在选择速度超过质量范围的模式时。无论哪种方式，股票 MS 编码器都不是硬件加速的。

但是，可能还有其他可用的 MFT（通常与相应的硬件驱动程序一起安装）进行硬件加速 H.264 编码。您可以通过枚举 MFT 来发现它们，也许最流行的是 Intel Quick Sync Video (QSV) Encoder。

HardwareVideoEncoderTransform app 进行枚举并为您提供相关详细信息：

典型输入是 NV12，有些提供其他输入选择（例如 32 位 RGB）。如果您需要其他格式，则必须预先转换输入。

硬件支持的编码器 CPU 消耗低，其效率取决于硬件实现。是的，您可以独立使用它们，完全独立使用它们或包装为 DirectShow 过滤器并包含在正常的 DirectShow 管道中。

备用 H.264 编码器通常基于 SDK，或以 DirectShow/MFT 形式封装在这些 SDK 之上，因为供应商将其实现打包成多媒体开发人员已经熟悉的众所周知的形式。