无法使用 Fairplay HLS 从 AVPlayer 获取视频缩略图

Question

我正在尝试为 tvOS 中的视频播放器应用构建自定义进度条，并希望在用户扫描视频时显示视频的缩略图。

我正在使用 AVPlayer 和 Fairplay HLS 播放远程视频文件。我尝试使用 2 种方法来做到这一点。一个使用AVAssetImageGenerator 的copyCGImage，另一个使用AVPlayerItemVideoOutput 的copyPixelBuffer 方法。两者都返回 nil。

当我尝试使用本地视频文件时，第一种方法有效。

方法一：

let imageGenerator = AVAssetImageGenerator(asset: playerItem.asset)
let progressSeconds = playerItem.duration.seconds * Double(progress)
let time = CMTime(seconds: progressSeconds, preferredTimescale: 5)
if let imageRef = try? imageGenerator.copyCGImage(at: time, actualTime: nil) {
   image = UIImage(cgImage:imageRef)
}

方法二：

let videoThumbnailsOutput = AVPlayerItemVideoOutput(pixelBufferAttributes: [String(kCVPixelBufferPixelFormatTypeKey): NSNumber(value: kCVPixelFormatType_32BGRA)])
player?.currentItem?.add(videoThumbnailsOutput)

if let pixelBuffer = videoThumbnailsOutput.copyPixelBuffer(forItemTime: time, itemTimeForDisplay: nil) {
   let ciImage = CIImage(cvPixelBuffer: pixelBuffer)

任何想法我做错了什么或有其他方法吗？

谢谢！

Answer 1

这通常是通过使用与您的实际流相关联的特技播放流来完成的。

https://en.wikipedia.org/wiki/Trick_mode

您可以在 HLS 流的清单中找到使用键 EXT-X-I-FRAME-STREAM-INF 声明的它。可能需要一个正则表达式来解析它的值。

"#EXT-X-I-FRAME-STREAM-INF[^#]*URI=[^#]*"

获得特技播放流的 URL 后，您可以使用暂停的 AVPlayer 实例作为缩略图。并且当用户左右滑动时，您应该在缩略图中寻找播放器以显示正确的帧。