EMR 5.16.0 -启动了太多的Mappers

Question

试图将EMR EC2实例从5.3C4.4XLarge(hivever2.1.1)升级到EMR5.16.0C5.4XLarge(Hive2.3.3)，我的简单查询从2.1.1EMR5.3.0中的表中选择max(date)，只启动一个映射器和一个减法器，当我升级和运行相同的查询时，它将启动1300+映射器。

试图比较两者的集合属性，但没有发现差异。

有人能帮我一下吗。

Answer 1

试试下面的设置。在从蜂箱2.1.1到2.3.3的某个地方，他们把它从真到假。

set hive.optimize.metadataonly=true;