我有一个用例,需要大约200个蜂箱拼花桌。我需要从平面文本文件中加载这些拼花表。但是我们不能直接从平面文本文件加载拼花表。因此,我使用以下方法
由于这种方法是将临时元数据(用于200个表)保存在亚稳态中。因此,第二种方法是,我也将删除临时文本表以及来自hdfs的文本文件。下一次重新创建临时表,并在创建拼板后删除。
现在,由于每两个小时我需要对所有200个表执行上述步骤,那么在生产过程中创建和删除亚稳态表会对集群中的任何事情产生影响吗?
哪种方法可以影响生产,在亚稳态中保留临时元数据,从蜂窝亚稳态中创建和删除表(元数据)?
发布于 2017-09-06 13:11:53
哪种方法可以影响生产,在亚稳态中保留临时元数据,从蜂窝亚稳态中创建和删除表(元数据)?
不,没有影响,HiveMetastore的后端应该能够轻松地处理每小时200 *n的更改。如果不确定,请从50个表开始,并监视后端DB性能。
https://stackoverflow.com/questions/38254117
复制相似问题