【问题标题】:Stream overlapping audio files to Chromecast Audio将重叠的音频文件流式传输到 Chromecast Audio
【发布时间】:2018-09-04 02:38:02
【问题描述】:

短

我想流式传输多个重叠的音频文件(一些在特定随机时间播放的音效)。这种生成的音频流永远不会以完全相同的方式重复。有些音频文件正在循环播放,有些则在特定时间循环播放。我猜可能是一种实时流插入会很好。

编写这样的服务器软件的最佳方法是什么?应该使用哪些协议进行流式传输(我更喜欢 HTTP)。我可能想为每个配置公开一个 url(音效的轨道和时间)。

任何指向代码/库的指针?最好使用任何语言,例如 java/kotlin/go/rust/ruby/python/node/...

示例

网址:https://server.org/audio?file1=loop&file2=every30s&file2_volume=0.5

回复:Audio stream(在投射设备上播放)

Stream 循环 file1。每隔 30 秒,它会以 50% 的音量播放 file2(覆盖在以 100% 播放的 file1 上)。文件 1 长 10 分 9 秒。所以这种组合永远不会真正重复。所以我们不能只提供一个预生成的 mp3 文件。

一些背景

我目前有一个随机播放不同音频文件的安卓应用程序。有些是循环播放,有些是每 x 秒播放一次。有时多达 10 个。

现在我想添加对 chromecast/chromecast audio/google home/... 的支持。我想最好的办法是拥有一个流式传输的服务器。每个用户在播放时都会有他/她自己的流。无需让多个用户收听同一个流(即使它可能也会受支持)。

服务器基本上会读取 url,获取配置,然后以音频流响应。服务器打开一个(或多个音频文件),然后将其组合/叠加到单个流中。在某些时候,这些音频文件会循环播放。其他一些音频文件在特定时间打开并添加/覆盖到流中。播放的每个音频文件都以不同的音量播放(有些声音更大,有些声音更小)。问题是如何制作这样的音频流以及如何实时添加不同的文件。

【问题讨论】:

  • 为什么不在 Chromecast 本身上使用 Web Audio API?
  • @Brad 可行。现在可能会走这条路。但是如果能够在服务器上创建一个流也很好。给了我更多的灵活性。
  • @PatrickBoos,为什么不使用ffmpeg 并创建文件? superuser.com/questions/1123480/…
  • 所以结合使用之前的评论和github.com/fluent-ffmpeg/…
  • @Tarun 我无法创建文件,因为我想合并多个文件(以及一些随机播放的文件)。这会导致一个无休止的文件(因为它永远不会重复完全相同。即使某些内容重复)。

标签: http https audio-streaming google-cast


【解决方案1】:

所以你的问题有两个部分

  • 使用不同的选项混合音频
  • 流式传输来自网络服务器的混合响应

我可以帮助你完成后面的部分,你需要自己弄清楚第一部分

下面是一个示例 nodejs 脚本。运行它创建一个目录并运行

npm init
npm install fluent-ffmpeg express

然后保存下面的文件

server.js

var ff = require('fluent-ffmpeg');
var express = require('express')
var app = express()

app.get('/merged', (req, res) => {
    res.contentType('mp3');
    // res.header("Transfer-Encoding", "chunked")
    command = ff()
        .input("1.mp3")
        .input("2.mp3")
        .input("3.mp3")
        .input("4.mp3")
        .complexFilter(`[1]adelay=2|5[b];
        [2]adelay=10|12[c];
        [3]adelay=4|6[d];
        [0][b][c][d]amix=4`)
        .outputOptions(["-f", "flv"])
    ;

    command.on('end', () => {
        console.log('Processed finished')
        // res.end()
    })
    command.pipe(res, {end: true});
    command.on('error', function(err, stdout, stderr) {
        console.log('ffmpeg stdout: ' + stdout);
        console.log('ffmpeg stderr: ' + stderr);
    });

})

app.listen(9090)

使用下面的命令运行它

node server.js

现在在VLC 打开http://localhost:9090/merged

现在根据您的要求,以下部分将发生变化

        .complexFilter(`[1]adelay=2|5[b];
        [2]adelay=10|12[c];
        [3]adelay=4|6[d];
        [0][b][c][d]amix=4`)

但我不是 ffmpeg 专家来指导您了解该区域。也许这需要另一个问题或从许多现有的 SO 线程中带头

ffmpeg - how to merge multiple audio with time offset into a video?

How to merge two audio files while retaining correct timings with ffmpeg

ffmpeg mix audio at specific time

https://superuser.com/questions/850527/combine-three-videos-between-specific-time-using-ffmpeg

【讨论】:

  • 几乎,但不完全是我正在寻找的东西。 1. 流需要无穷无尽。 2. 流需要是可变的。例如。 10 分钟后决定删除声音 x,并添加声音 y。
猜你喜欢
  • 2014-08-12
  • 2016-02-18
  • 2011-04-18
  • 2011-04-26
  • 1970-01-01
  • 2021-03-18
  • 1970-01-01
  • 1970-01-01
  • 2014-03-21
相关资源
最近更新 更多