【问题标题】:nodeJS S3.getObject() timing out (is there better options for images?) in LambdaLambda 中的 nodeJS S3.getObject() 超时(图像有更好的选择吗?)
【发布时间】:2020-04-05 22:11:33
【问题描述】:

所以我在 Amazon S3 中存储和访问图像。我用于访问图像的代码(Lambda 中的 nodeJS)如下...

//...Other unerelated Code
    var s3Params = {
        "Bucket": "example-bucket",
        "Key": "example-image-key"
    };
    try{
            //some unrelated code getting item from DynamoDB
            image : await s3.getObject(s3Params).promise()


    }catch(err)
    {
        //Handling
    }

所以这很有效......对于小图像(39.3KB 几乎是瞬间),但对于更大的图像它会超时(3.1MB 将在 20 秒后超时)。

有没有更好的方法来做到这一点?还是我应该期望它需要更长的时间并增加超时?

编辑:下面的完整代码

const AWS = require('aws-sdk');
exports.handler = async (event) => {
AWS.config.update({region: 'ap-southeast-2'});
const db = new AWS.DynamoDB.DocumentClient;
const s3 = new AWS.S3();
let itemParamters = {
Key: {
    name: event.name,
},
TableName: 'records'
};
var s3Params = {
    "Bucket": "Example-BucketName",
    "Key": "Example key" + event.name + ".jpg"
};
var msg;
var code;


try{
    code = 200;
    msg ={
        item : await db.get(itemParamters).promise(),
        image : await s3.getObject(s3Params).promise()
    };

}catch(err)
{
    code = 500;
    msg = "Error: " + err;
}

var response = {
    headers: {
        "Access-Control-Allow-Origin" :"*"
    },
    statusCode: code,
    body: msg
};

return response;

};

编辑 2:

经过进一步测试,超时似乎发生在响应设置期间,特别是图像。

【问题讨论】:

  • 嘿@MasterEnzo,我怀疑这与 lambda 中的其他代码有关,因为从 S3 获取该大小的对象需要很长时间。您可以尝试删除其他所有内容并进行测试吗?
  • @razki 我已将所有代码添加到原始帖子中,因为我是新手,如果它包含问题,我不会感到惊讶。我查看发布的原始代码的原因是,如果我运行代码时将“image: await s3.getObject()...”注释掉,它会运行得很快。如果我注释掉“db.get()...”,它仍然会超时。以及照片大小似乎有所不同的事实。

标签: node.js amazon-s3 aws-lambda


【解决方案1】:

这是因为您试图通过 JSON 返回从 S3 返回的对象,其中包括缓冲区数据。图像越大,显示的数据就越多。这就是您会看到超时的原因。

调用.getObject()返回的示例对象

{
 AcceptRanges: 'bytes',
 LastModified: 2020-04-05T13:52:07.000Z,
 ContentLength: 78392,
 ETag: '"d009e410*****"',
 ContentType: 'image/jpeg',
 Metadata: {},
 Body: <Buffer ff d8 ff e0 00 10 ... 124764 more bytes>
}

如果您试图仅从图像中获取哈希值进行比较,您可以执行以下操作:

const AWS = require('aws-sdk')

const s3 = new AWS.S3()

exports.handler = async () => {
    const s3Params = {
        Bucket: 'bucket',
        Key: 'test.jpg',
    }

    const { ETag } = await s3.getObject(s3Params).promise()

    return {
        headers: {
            'Access-Control-Allow-Origin': '*',
        },
        statusCode: 200,
        hash: ETag,
    }
}

但我怀疑您确实想将图像返回给用户,我建议您查看以下资源:

http://docs.aws.amazon.com/apigateway/latest/developerguide/integrating-api-with-aws-services-s3.html

【讨论】:

  • 感谢您的帮助,我已经成功了,对于 3.1MB 的图像,它在大约 4 秒内完成了该功能。这是对还是错?
  • 没有问题。完全取决于期望的结果是什么......?我在上面发布的代码将返回 MD5 哈希(S3 领域中的 ETag)。这就是为什么您会在 4 秒内看到 lambda 函数返回的原因。
猜你喜欢
  • 1970-01-01
  • 2018-07-03
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2012-09-11
  • 1970-01-01
  • 2019-02-26
  • 2017-01-18
相关资源
最近更新 更多