对于数据移动，有什么最好的选择吗？

Question

我有1000多个TB数据要从S3转移到blob存储。有什么最好的选择吗？因为Azcopy使用高带宽和高CPU使用率。我不想用它。在Azcopy v10中，在应用所需的参数之后仍然会出现这些问题。有人能帮我在这方面，我做了研发，但没有找到任何替代。

Answer 1

我同意@S RATH。

对于大数据移动而言，数据工厂是Azcopy的最佳选择。它具有更好的复制性能：

​

Data支持Amazon和Blob作为连接器。

使用Copy，您可以创建Amazon作为源数据集，Blob存储作为Sink数据集。

参考这些教程：

1. 使用Azure数据工厂从Amazon简单存储服务复制数据：本文概述了如何从(，亚马逊S3)复制数据。要了解Azure introductory，请阅读介绍性文章。
2. 使用Azure数据工厂在Azure Blob存储中复制和转换数据：本文概述了如何使用Azure中的复制活动将数据复制到Azure存储中。本文还描述了如何使用数据流活动来转换Azure Blob存储中的数据。要了解Azure introductory，请阅读介绍性文章。

Data还提供了许多提高数据复制性能的方法，ref：复制活动性能和可伸缩性指南

我认为它能帮你节省很多时间，正如我们所知，时间就是金钱。