首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >snowflake如何在内部将数据存储到微分区

snowflake如何在内部将数据存储到微分区
EN

Stack Overflow用户
提问于 2020-01-27 13:59:06
回答 2查看 244关注 0票数 0

我更想了解Snowflake将数据存储到微分区的过程。据我所知,snowflake每个分区的大小是50-500MB。

假设我有一个大小为1 1GB的文件,我想将这些数据加载到snowflake中。有人能给我解释一下雪花将数据存储到微粒子中的内部过程/步骤吗?

EN

回答 2

Stack Overflow用户

发布于 2020-01-27 17:34:35

Snowflake的微分区文件格式是专有的,所以你不会得到比文档中已经有的更多的信息(除了有人违反了Snowflake的雇佣合同)。

票数 4
EN

Stack Overflow用户

发布于 2020-01-31 00:41:37

为了优化加载的并行操作数量,Snowflake建议压缩大小约为10 MB到100 MB的文件。将大文件拆分为更多数量的小文件可以在活动仓库中的服务器之间分配负载,并提高性能。

https://docs.snowflake.net/manuals/user-guide/data-load-considerations-prepare.html#general-file-sizing-recommendations

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/59925763

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档