我们在雅典娜有一个视图,它是在processing_date (数据类型: string - format 20201231)上划分的,我们正在寻找2020年的数据。
为了探索,我们需要所有的专栏。
查询:
select * from online_events_dw_view
where from_iso8601_date(processing_date) > from_iso8601_date('20191231')错误:
Query exhausted resources at this scale factor是否有更好的方法来优化查询?
发布于 2020-08-13 11:03:58
您正在将函数应用到分区列,这很可能导致雅典娜扫描所有数据,因此您会遇到问题。
为什么不简单:processing_date like '2020%'
如果您对列感兴趣,也可以尝试使用limit 1000来限制数据量。
发布于 2020-08-13 17:36:15
当对包含大量列的结果集进行排序时,最常见的错误是“查询耗尽了此比例因子的资源”。
由于您没有发布视图SQL,所以无法确定这是否是您的情况下的问题,但是它几乎总是宽行和排序,所以我假设您的视图中有一个ORDER BY。尝试删除它,并查看查询是否没有错误地执行。
是否有更好的方法来优化查询
你需要发布更多的信息,我们才能帮助你。如果没有用于视图的SQL,就不可能说出任何话。还为所有涉及的表发布SQL,并给出一些有关分区、数据量、文件格式等的上下文。
https://stackoverflow.com/questions/63391035
复制相似问题