无法使用aws-fargate ecs加载大文件

Question

我试着按照这页上提到的说明去做...

https://towardsdatascience.com/serverless-distributed-data-pre-processing-using-dask-amazon-ecs-and-python-part-1-a6108c728cc4

得到了2个错误。一个与IAM角色有关，另一个与dask有关。

1)我检查了sagemaker策略是否包含完全访问权限，但仍然获得此异常：

An error occurred (AccessDeniedException) when calling the UpdateService operation: User: arn:aws:sts::513469704633:assumed-role/AmazonSageMaker-ExecutionRole-20180101T192504/SageMaker is not authorized to perform: ecs:UpdateService on resource: *

2)我不明白取消的错误是什么意思：

CancelledError: ('head-1-5-from-delayed-12929833853fcc20e3534186ebfd77f0', 0)

附加的Python笔记本屏幕截图。

​

Answer 1

我的第一个猜测是，您使用fargate启动的dask worker没有足够的权限读取您的数据。您可能需要通读这些文档：

http://docs.dask.org/en/latest/remote-data-services.html#amazon-s3