首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >重复创建和删除蜂巢表的影响

重复创建和删除蜂巢表的影响
EN

Stack Overflow用户
提问于 2016-07-07 19:49:11
回答 1查看 385关注 0票数 0

我有一个用例,需要大约200个蜂箱拼花桌。我需要从平面文本文件中加载这些拼花表。但是我们不能直接从平面文本文件加载拼花表。因此,我使用以下方法

  1. 创建临时托管文本表。
  2. 加载包含文本数据的临时表。
  3. 创建了外部拼花表。
  4. 使用select查询加载带有文本表的拼花表。
  5. 删除临时文本表的文本文件(但将表保存在亚稳态中)。

由于这种方法是将临时元数据(用于200个表)保存在亚稳态中。因此,第二种方法是,我也将删除临时文本表以及来自hdfs的文本文件。下一次重新创建临时表,并在创建拼板后删除。

现在,由于每两个小时我需要对所有200个表执行上述步骤,那么在生产过程中创建和删除亚稳态表会对集群中的任何事情产生影响吗?

哪种方法可以影响生产,在亚稳态中保留临时元数据,从蜂窝亚稳态中创建和删除表(元数据)?

EN

回答 1

Stack Overflow用户

发布于 2017-09-06 13:11:53

哪种方法可以影响生产,在亚稳态中保留临时元数据,从蜂窝亚稳态中创建和删除表(元数据)?

不,没有影响,HiveMetastore的后端应该能够轻松地处理每小时200 *n的更改。如果不确定,请从50个表开始,并监视后端DB性能。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/38254117

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档