识别 Android 上的 HE-AAC 音频以进行正确解码和播放

Question

我在 Android（目标 API 级别 >= 16）上使用 MediaExtractor / MediaCodec 组合来解码音频流。现在，在播放包含 MPEG-4 HE-AAC 音频数据的 mp4/m4a 容器时，我遇到了一个微妙的问题。

在为MediaFormat.KEY_SAMPLE_RATE 查询轨道的MediaFormat 时，我实际上只得到了预期大小的一半，例如对于需要播放采样率为44100 的轨道，MediaFormat 返回 22050。在阅读了一些关于 HE- 的文档后AAC 我知道就编解码器的工作方式而言，这是“正确的”。

不过，要在 AudioTrack 实例上播放音轨，我必须使用正确的（播放）采样率对其进行配置，即 44100 而不是 22050。

因此，我正在寻找一种方法来确定音频何时以 API 目标级别 >= 16 进行 HE-AAC 编码，因此我可以将 AudioTrack 的采样率设置为报告采样率的两倍。

编辑：当MediaCodec返回MediaCodec.INFO_OUTPUT_FORMAT_CHANGED时，我确实检查了MediaFormat。格式如下所示：

max-input-size=946, 
aac-profile=2, 
mime=audio/mp4a-latm, 
durationUs=158499410,
csd-0=java.nio.ByteArrayBuffer[position=0,limit=5,capacity=5], 
channel-count=2, 
sample-rate=22050

要在AudioTrack 上正确播放，我需要将采样率设置为 2 * sample-rate = 44100。

我想知道csd-0 是否包含更多信息来推断配置文件/格式/等。对于上面的示例，csd-0 缓冲区中的 5 个字节如下所示：

0x13 0xffffff90 0x56 0xffffffe5 0xffffffa0

现在我想知道这个“编解码器特定数据”的具体结构

Answer 1

您应该只将MediaExtractor 返回的MediaFormat 视为提示；您需要查看MediaCodec 与INFO_OUTPUT_FORMAT_CHANGED 返回的内容，这应该返回真实的采样率。这意味着您只能在内容解码开始后配置AudioTrack。