【问题标题】:Dynamodb scan from AWS Lambda takes a lot longer than from local machineAWS Lambda 的 Dynamodb 扫描比本地机器花费的时间要长得多
【发布时间】:2020-09-25 07:51:46
【问题描述】:

我有一个相对较小的 DynamoDB 表(大约 1000 多条记录,每个记录可能几百字节或更小)。当我使用 boto3 从我的机器上扫描 Dynamodb 表时,它会立即返回 1000 多条记录。但是,当我在 AWS Python Lambda 中执行完全相同的操作时,需要 15 秒以上才能返回相同的数据量。

我已阅读有关 1MB 限制的信息,但这似乎无法解释,我们没有返回那么多数据。我尝试将表格的读取容量增加到 3 个单位。但这似乎并没有什么不同。

我们将不胜感激。

我确实尝试过调试 谢谢,很好的建议。在日志级别 DEBUG 有

2020-07-10T14:52:18.302Z Calling dynamodb:scan with {'TableName': 'SIUser'}

2020-07-10 14:52:28,973 boto3.resources.action [DEBUG] Response: [entire response here]. 

这让我相信它一口气获取了所有数据。大部分时间是这部分花费的 10 秒。

谢谢。

【问题讨论】:

  • 能不能在boto3中开启调试模式并贴出日志?
  • 增加您的 Lambda 函数的 RAM 大小,例如到 1GB。有区别吗?
  • @Shawn - 是的,我确实将日志记录级别设置为调试。但是 jarmod 你可能正在做某事。我刚刚创建了一个独立的测试驱动程序 (lambda) 并尝试将内存增加到 1 GB,并且持续时间立即下降!

标签: amazon-web-services aws-lambda amazon-dynamodb


【解决方案1】:

由于 boto3 DynamoDB 扫描是基于网络 IO 的任务,如果您想及时完成操作,拥有足够的计算资源非常重要。

函数获取与其内存分配成正比的 CPU 功率。尝试以 256 Mb 为增量增加内存限制,看看是否有帮助。

【讨论】:

猜你喜欢
  • 2016-10-15
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2015-05-02
  • 2020-09-07
相关资源
最近更新 更多