【问题标题】:aws-s3 | Is there a server-side filter for aws-cli?aws-s3 | aws-cli 是否有服务器端过滤器?
【发布时间】:2019-11-12 17:13:40
【问题描述】:

我正在尝试从一个大存储桶 (90TB~) 中获取一些关于上次修改时间戳和一些搜索的统计信息(基于一些键/前缀的临时)。基于https://aws.amazon.com/s3/pricing/,列表请求是有成本的,因此分页甚至--query(似乎是客户端过滤器)等方法根据调用量(每1,000个请求0.005美元)不符合此问题的条件) 每个过滤器都需要。

我们是否有一个服务器端过滤器,可以将参数用作搜索条件并仅返回过滤后的数据?

【问题讨论】:

  • 我所知道的 S3 没有服务器端过滤器。您可以改用 S3 清单报告。

标签: amazon-web-services amazon-s3 aws-cli


【解决方案1】:

这听起来像是使用 Amazon S3 Inventory 的绝佳用例。

它可以提供包含所有对象及其元数据列表的每日文件。

【讨论】:

  • 谢谢,John,在成本和时间处理方面这是一个很好的解决方案。目前正在使用较小的存储桶进行检查,并且按照要求完美运行。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2019-05-28
  • 2013-08-31
相关资源
最近更新 更多