HQL失败sqlexception

Question

当我跑的时候

Select * from table_a

使用我的蜂巢，我收到：

SQLException pa当前的sql输入文件超过了最大限制。请优化。最大文件--→100000

当我搜索这个错误时，我什么也找不到。

Answer 1

似乎您的表已经爆炸了允许的HDFS文件的最大数量。

转到单元(或直线)并运行以下命令，默认情况下值为100000

set hive.exec.max.created.files;

要解决这个问题，您需要检查插入查询，并了解它为什么要创建这么多文件。

但是，现在，您可以使用以下命令连接部分分区(最好对所有分区都这样做)

alter table dbname.tblName partition (col_name=value) concatenate;