ffmpeg mono8/rgb24 图像到 yuv420p 到 x264 的转换

Question

这可能是一个微不足道的问题，但我对这个 (ffmpeg) 框架感到疯狂。 基于这篇文章 (sws_scale YUV --> RGB distorted image)（以及更多搜索），我编写了以下代码来获取指向缓​​冲区图像（Mono8 或 RGB24）的 char* 指针，并转换为 YUV420P 以在 x264 中编码。我必须在两台 PC 之间创建此图像的流式传输。

这是代码：

bool compressImageX264(Frame *f, int size, char* image){
 codec = avcodec_find_encoder(AV_CODEC_ID_H264);
 if (!codec) {
  std::cout << "Codec not found" << std::endl;
  return false;
 }
 c = avcodec_alloc_context3(codec);
 if (!c) {
  std::cout << "Could not allocate video codec context" << std::endl;
  return false;
 }
 av_opt_set(c->priv_data, "preset", "veryfast", 0);
 av_opt_set(c->priv_data, "tune", "zerolatency", 0);
 c->width = std::stoi(f->width);
 c->height = std::stoi(f->height);
 c->gop_size = 10;
 c->max_b_frames = 1;
 EDIT: c->pix_fmt = AV_PIX_FMT_YUV420P;
 /* open it */
 if (avcodec_open2(c, codec, NULL) < 0) {
  std::cout << "Could not open codec" << std::endl;
  return false;
 }

 AVFrame *avFrameRGB = av_frame_alloc();
 if (!avFrameRGB) {
  std::cout << "Could not allocate video frame" << std::endl;
  return false;
 }
 avFrameRGB->format = std::stoi(f->channels) > 1 ? AV_PIX_FMT_RGB24 : AV_PIX_FMT_GRAY8;
 avFrameRGB->width = c->width;
 avFrameRGB->height = c->height;

 int ret = av_image_alloc(
   avFrameRGB->data, avFrameRGB->linesize,
   avFrameRGB->width, avFrameRGB->height, AVPixelFormat(avFrameRGB->format),
   32);
 if (ret < 0) {
  std::cout << "Could not allocate raw picture buffer" << std::endl;
  return false;
 }

 uint8_t *p = avFrameRGB->data[0];
 for (int i = 0; i < size; i++){
   *p++ = image[i];
 }
 AVFrame* avFrameYUV = av_frame_alloc();
 avFrameYUV->format = AV_PIX_FMT_YUV420P;
 avFrameYUV->width = c->width;
 avFrameYUV->height = c->height;
 ret = av_image_alloc(
    avFrameYUV->data, avFrameYUV->linesize,
    avFrameYUV->width, avFrameYUV->height, AVPixelFormat(avFrameYUV->format),
    32);

 SwsContext *img_convert_ctx = sws_getContext(c->width, c->height, AVPixelFormat(avFrameRGB->format),
   c->width, c->height, AV_PIX_FMT_YUV420P,
   SWS_FAST_BILINEAR, NULL, NULL, NULL);
 ret = sws_scale(img_convert_ctx, 
   avFrameRGB->data, avFrameRGB->linesize,
   0, c->height, 
   avFrameYUV->data, avFrameYUV->linesize);
 sws_freeContext(img_convert_ctx);

 AVPacket pkt;
 av_init_packet(&pkt);
 pkt.data = NULL; // packet data will be allocated by the encoder
 pkt.size = 0;

 avFrameYUV->pts = frameCount; frameCount++; //GLOBAL VARIABLE
 int got_output;
 ret = avcodec_encode_video2(c, &pkt, avFrameYUV, &got_output);
 if (ret < 0) { //<-- Where the code broke
   std::cout << "Error encoding frame" << std::endl;
   return false;
 }
 if (got_output) {
    std::cout << "Write frame " << frameCount - 1 << "(size = " << pkt.size << ")" << std::endl;
    char* buffer = new char[pkt.size];
    for (int i = 0; i < pkt.size; i++){
      buffer[i] = pkt.data[i];
    }
    f->buffer = buffer;
    f->size = std::to_string(pkt.size);
    f->compression = std::string("x264");
    av_free_packet(&pkt);
  }
  return true;
}

我知道这可能效率很低，但现在我担心让它发挥作用。当我调用 avcodec_encode_video2 时我失败了。在控制台上打印此消息：“输入图片宽度（640）大于步幅（320）”。 我认为转换是刺客。但我不完全知道参数的含义 感谢您的所有帮助。

编辑： 好的，我已经建立了“第一个”错误。现在转换工作正常并且 avcodec_encode_video2 返回 0。现在的问题是 got_output 总是等于 0 并且在控制台上什么都没有。

Answer 1

我找到了这个解决方案： Encoding raw YUV420P to h264 with AVCodec on iOS

可以同步调用encode吗？