hive大表rename异常如何处理？

原创

艾利

修改于 2025-03-05 13:45:06

3470

假设现有表 A，出于一些原因，想将其重命名为B，执行HSQL：

alter table test_db.dm_order_xxx_a  RENAME TO test_db.dm_order_xxx_b

出现报错：

报错分析: 库和表不在同一个HDFS cluster上，导致在hive表在rename的过程中，mv HDFS目录的时候产生across federation的报错。
其中, 库表不在同一个HDFS cluster的原因有：
1. 用户手动指定了table locaiton
2. 因FS cluster容量比较满时，BD同学将部分库的location迁到新的HDFS cluster上，此时历史表的location还在原来的cluster.

set tqs.query.engine.type=hive; -- 在风神SQL查询或Dorado HSQL执行需要添加这一行
alter table test_db.dm_order_xxx_a set tblproperties ('EXTERNAL' = 'true');

alter table test_db.dm_order_xxx_a  RENAME TO test_db.dm_order_xxx_b

set tqs.query.engine.type=hive; -- 在风神SQL查询或Dorado HSQL执行需要添加这一行
alter table test_db.dm_order_xxx_b set tblproperties ('EXTERNAL' = 'FALSE');

原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。

如有侵权，请联系 cloudcommunity@tencent.com 删除。

原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。

如有侵权，请联系 cloudcommunity@tencent.com 删除。

登录后参与评论

0 条评论

热度