我能控制AWS胶服务中DPU的数量吗？

Question

我能控制AWS胶服务中DPU的数量吗？

我在官方文件中看到Glue有6个DPU，但我不需要多达6个DPU。此外，我恐怕会有过高的成本。

Answer 1

运行Glue作业所需的最低DPU为两个。执行Glue作业不需要6个DPU。

要正确规划您的容量，请参考这。

Answer 2

可以指定“数字”和“类型工作人员”。引用文档的话

工人型 可用下列工作人员类型：

• 标准-当您选择这种类型时，您还提供了最大容量的值。最大容量是在此作业运行时可以分配的AWS Glue数据处理单元(DPU)的数量。DPU是处理能力的相对度量，它由4个计算容量的vCPU和16 GB的内存组成。标准工作者类型有一个50 GB的磁盘和2个执行程序。
• G.1X -当您选择这种类型时，您还提供了一个值的工人人数。每个工作程序映射到一个DPU (4 vCPU，16 GB内存，64 GB磁盘)，并为每个工作人员提供1个执行器。对于内存密集型作业，建议使用此工作类型。
• G.2X -当您选择这种类型时，您还提供了一个值的工人人数。每个工作程序映射到2个DPU (8 vCPU，32 GB内存，128 GB磁盘)，并为每个工作人员提供1个执行器。对于内存密集型作业和运行ML转换的作业，建议使用此工作类型。 您将根据用于运行ETL作业的DPU数量收取每小时费率。有关更多信息，请参见AWS Glue定价页面。 使用控制台配置作业并指定标准的工作类型时，将设置最大容量并将工人数变为最大容量值- 1。如果使用AWS命令行接口(AWS CLI)或AWS SDK，则可以指定最大容量参数，也可以同时指定员工类型和员工数量。有关更多信息，请参见乔布斯。

工人人数

在作业运行时分配的已定义workerType的员工数。对于G.1X和G.2X工作人员类型，必须指定该类型的员工数。您可以定义的最大员工数为:G1X 299人，G.2X 149人。