使用Azure数据工厂对Azure托管的雪花进行转换是否有效？

Question

我试图了解使用Azure数据工厂在雪花(基于Azure)中转换数据的效率。我们有两种可能的方案，并希望选择最有效的方案：

设想1：

• Data将原始数据的摄取安排到Azure SQL中。
• Data负责将Azure SQL中的原始数据转换和加载到雪花中的汇总表。历史原始数据保存在Azure SQL中。

设想2：

• 数据工厂将原始数据摄取到雪花中
• Data负责将雪花中的原始数据转换为雪花中的汇总表。历史原始数据保存在雪花中。

场景2是在转换步骤中将原始数据从雪花转移到ADF (数据集)，还是全部发生在没有数据集出口的雪花中？

阅读ADF文档，似乎计算本身发生在链接服务(即雪花)上，而不是在ADF本身，但这是否意味着数据在ADF转换时不会离开雪花？

如果问题不清楚请告诉我。谢谢!

Answer 1

对于场景2，数据被传递给雪花并在那里转换。ADF在这里只有一个协调者角色，没有行动2的出口流量。