我目前正在设计Google Big Query中的表格,我需要在明年内将设计转移到AWS中的雪花。GBQ有一种允许在列中嵌套数据的STRUCT数据类型(Specifying nested and repeated columns)。Snowflake是否有类似的数据类型/功能?根据this article from Snowflake的说法,该平台支持访问半结构化数据的SQL查询。这两篇文章中的样本数据看起来是相同的,措辞也是相似的,但是我不确定这两种数据是否属于相同的类型。我是否能够在不完全重构的情况下将使用GBQ结构的设计转换到Snowflake上?
发布于 2020-07-28 09:35:44
我不是BQ专家,但我认为这里的关键区别在于BQ需要预先定义STRUCT模式。Snowflake中的等效类型是VARIANT类型,它将存储半结构化数据,但不需要预先提供Schema。因此,只要可以将Struct列导出到JSON或Parquet或类似的格式,就不需要重构任何东西。
https://stackoverflow.com/questions/63121580
复制相似问题