提高此查询的扁平化性能

Question

雪花社区

我正在运行一个Snowpipe，它不断地将JSON放入一个临时表中，然后将该临时表展平为多个目标表。

其中一个目标表需要在JSON上运行4个横向展平-类似于这样，但是数据加载的速度比我运行展平的速度还要快。

LATERAL FLATTEN(INPUT => JSON:data:Element) ELEMENT, 

LATERAL FLATTEN(INPUT => ELEMENT.VALUE) ATTRIBUTE, 

LATERAL FLATTEN(INPUT => ATTRIBUTE.VALUE) SUBATTRIBUTE, 

LATERAL FLATTEN(INPUT => SUBATTRIBUTE.VALUE) SUB_SUB_ATTRIBUTE

如果我将每个展平的元素存储在它自己的表中，然后在上游表上运行后续的flatten语句，会不会更快？

Answer 1

你有没有考虑过用一个递归的FLATTEN()来代替之前所有的？

LATERAL FLATTEN(INPUT => JSON:data:Element, RECURSIVE => TRUE)