ffmpeg 文件转换 AWS Lambda答案

【问题标题】：ffmpeg file conversion AWS Lambdaffmpeg 文件转换 AWS Lambda
【发布时间】：2021-04-10 17:21:21
【问题描述】：

我希望 .webm 文件在到达我的 S3 存储桶后转换为 .wav 文件。我遵循this 教程并尝试使用here 描述的.webm -> .wav ffmpeg 命令根据我的用例对其进行调整。

我的 AWS Lambda 函数通常有效，因为当我的 .webm 文件到达源存储桶时，它会转换为 .wav 并最终进入目标存储桶。但是，生成的文件 .wav 始终为 0 字节（尽管 .webm 不是，包括相应的音频）。我是否错误地修改了代码？我只更改了第一个链接中的 ffmpeg_cmd 行。

import json
import os
import subprocess
import shlex
import boto3

S3_DESTINATION_BUCKET = "hmtm-out"
SIGNED_URL_TIMEOUT = 60

def lambda_handler(event, context):

    s3_source_bucket = event['Records'][0]['s3']['bucket']['name']
    s3_source_key = event['Records'][0]['s3']['object']['key']

    s3_source_basename = os.path.splitext(os.path.basename(s3_source_key))[0]
    s3_destination_filename = s3_source_basename + ".wav"

    s3_client = boto3.client('s3')
    s3_source_signed_url = s3_client.generate_presigned_url('get_object',
        Params={'Bucket': s3_source_bucket, 'Key': s3_source_key},
        ExpiresIn=SIGNED_URL_TIMEOUT)
    
    ffmpeg_cmd = "/opt/bin/ffmpeg -i \"" + s3_source_signed_url + "\" -c:a pcm_f32le " + s3_destination_filename + " -"
    
    
    command1 = shlex.split(ffmpeg_cmd)
    p1 = subprocess.run(command1, stdout=subprocess.PIPE, stderr=subprocess.PIPE)

    resp = s3_client.put_object(Body=p1.stdout, Bucket=S3_DESTINATION_BUCKET, Key=s3_destination_filename)

    return {
        'statusCode': 200,
        'body': json.dumps('Processing complete successfully')
    }

【问题讨论】：

不确定哪些语句实际上在等待子进程/命令，但您是否确保 subprocess.run 在返回 p1 之前等待命令完成？如果不是这种情况，您在尝试转换为该文件后立即上传一个空文件，但上传是在转换开始之前完成的。
根据描述，命令等待：docs.python.org/3/library/subprocess.html

标签： amazon-web-services amazon-s3 ffmpeg aws-lambda

【解决方案1】：

呈现的代码使用 ffmpeg 的输出作为要上传的源数据。为此，ffmpeg 需要输出数据。分解命令

"-i \"" + s3_source_signed_url + "\" " +   # The input filename to use
"-c:a pcm_f32le " +                        # The encoder to use
s3_destination_filename + " " +            # The output filename to write to
"-"                                        # Output data to stdout

换句话说，您是在告诉 ffmpeg 使用两个不同的输出。这不是你想要的。最重要的是，如果您删除输出文件名使其仅尝试使用标准输出，它将不知道要使用哪种文件格式。

如果你使用如下命令：

ffmpeg_cmd = "/opt/bin/ffmpeg -i \"" + s3_source_signed_url + "\" -c:a pcm_f32le -f wav -"

它应该做你所追求的。这里已经指示 ffmpeg 输出为 wav 文件，并将输出仅发送到 stdout。

【讨论】：

是的，这行得通！谢谢你的解释。您如何建议在生成的 .wav 文件上运行另一个进程？您会从目标存储桶设置另一个触发器，还是可以在处理完 .wav 文件后对其执行其他操作？
这两种方法各有利弊。就我个人而言，我更喜欢让 Lambda 尽可能自包含，因此添加一个进程来触发创建 wav 文件，以完成一些进一步的工作。
我的下一个触发器遇到了类似的问题（即一个单独的 lambda 函数，它采用了第一个创建的 .wav）。这是我用来运行命令的 python 行： sonic_annotator_cmd = "/opt/bin/sonic-annotator -f -d vamp:pyin:pyin:notes -w csv " + s3_source_signed_url + " -" 这导致空.csv 但它应该包含基于 .wav 文件的相关数据。

【解决方案2】：

我尝试了将数据输出到标准输出的方法，但花了超过 15 分钟，但失败了。

所以我使用可以容纳超过 512 MB 文件的 EFS。 Using Amazon EFS with Lambda - AWS Lambda

【讨论】：