我使用数据管道来调度emr作业。到目前为止,我使用的是emr集群的统一实例组。我想尝试使用实例队列来减少对特定实例类型和可用区的依赖。但在查看数据管道文档(https://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-object-emrcluster.html)时,找不到实例机队配置的任何参数。
如何在数据管道中指定emr集群的实例机队配置?
发布于 2019-12-04 14:39:21
对于任何正在寻找同样的东西的人:https://medium.com/@sid_sharma/event-driven-serverless-architecture-for-supporting-emr-spot-instance-fleet-in-aws-datapipeline-2272995022d1。简而言之,仅仅使用数据管道不能直接做到这一点。
https://stackoverflow.com/questions/59098759
复制相似问题