Gstreamer 管道连接两个媒体容器（视频和音频流）

Question

我是 gstreamer 的初学者，正在努力使用 Gstreamer 1.0 的管道来无缝连接两个 MP4 媒体容器，它们都带有视频和音频流。 在我看来，使用“concat”元素是最方便的方法，我可以连接任一视频流：

gst-launch-1.0 concat name=c ! autovideosink  filesrc location=1.mp4 ! decodebin ! videoconvert ! c.  filesrc location=2.mp4 ! decodebin ! videoconvert ! c.

或音频流：

gst-launch-1.0 concat name=c ! autoaudiosink  filesrc location=1.mp4 ! decodebin ! audioconvert ! c.  filesrc location=2.mp4 ! decodebin ! audioconvert ! c.

但到目前为止，创建一个将两个容器与视频和音频连接起来的管道还没有运气。

从this article 我意识到streamsynchronizer 是必需的，所以有人可以帮忙提供示例管道以显示它的外观吗？

Answer 1

好的，我想出了这个，但有时 alsa 说流不处于正确的状态..

GST_DEBUG=3 gst-launch-1.0 concat name=c2 ! videoconvert ! videorate ! autovideosink concat name=c ! audioconvert ! audiorate ! alsasink filesrc location=big.mp4 ! decodebin name=d1 ! audio/x-raw ! queue ! c. filesrc location=big2.mp4 ! decodebin name=d2 ! audio/x-raw ! queue ! c. d1. ! video/x-raw ! queue ! c2. d2. ! video/x-raw ! queue ! c2.

管道的小信息：

1，您不必使用 audioconvert/videoconvert 来识别来自 decodebin 的流类型 - 您可以安全地分别使用 audio/x-raw 或 video/x-raw.. 解码后音频/视频始终为原始格式。

2，使用 2 个 concat 元素，因为一个元素一次只能处理一个流.. 但是如果您使用两个 concat，您可能会担心音频/视频不同步.. 我希望它是同步的，因为它们都生活在同一个管道中它有一个时钟提供者，所以理论上应该没问题。当你需要适当的同步时，将所有东西放在一个管道中总是很重要的。

3，我使用了 alsasink，但您可以使用适合您的任何接收器.. 有时 autoaudiosink 为我选择了我不太喜欢的脉冲接收器.. 我喜欢使用这种音频管道末端：audioconvert ! audiorate ! alsasink

4，我已经看到了这些错误，但是在添加队列后它就消失了.. 但它们可能会出现在你面前，我不知道..

0:00:00.053972316 11839 0x7f0274003b70 WARN           audiobasesink gstaudiobasesink.c:1139:gst_audio_base_sink_wait_event:<alsasink0> error: Sink not negotiated before eos event.
ERROR: from element /GstPipeline:pipeline0/GstAlsaSink:alsasink0: The stream is in the wrong format.
Additional debug info:
gstaudiobasesink.c(1139): gst_audio_base_sink_wait_event (): /GstPipeline:pipeline0/GstAlsaSink:alsasink0:
Sink not negotiated before eos event.
ERROR: pipeline doesn't want to preroll.