无法使用 aws-fargate ecs 加载大文件答案

【问题标题】：can not load large files using aws-fargate ecs无法使用 aws-fargate ecs 加载大文件
【发布时间】：2019-06-07 12:42:35
【问题描述】：

我尝试按照此页面上提到的说明进行操作...

https://towardsdatascience.com/serverless-distributed-data-pre-processing-using-dask-amazon-ecs-and-python-part-1-a6108c728cc4

并且有 2 个错误。一个与IAM角色有关，另一个与dask有关。

1) 我检查了 sagemaker 政策是否包含完全访问权限，但仍然出现此异常：

An error occurred (AccessDeniedException) when calling the UpdateService operation: User: arn:aws:sts::513469704633:assumed-role/AmazonSageMaker-ExecutionRole-20180101T192504/SageMaker is not authorized to perform: ecs:UpdateService on resource: *

2) 我不明白取消错误是什么意思：

CancelledError: ('head-1-5-from-delayed-12929833853fcc20e3534186ebfd77f0', 0)

附上 Python 笔记本屏幕截图。

【问题讨论】：

标签： dask amazon-ecs dask-distributed aws-iam aws-fargate

【解决方案1】：

我的第一个猜测是，您从 fargate 开始的 dask 工作人员没有足够的权限来读取您的数据。您可能需要通读这些文档：

http://docs.dask.org/en/latest/remote-data-services.html#amazon-s3

【讨论】：