我正在将.gzip文件作为二进制文件加载到我的原始容器中,现在我想知道如何继续进行蔚蓝突触分析。我希望获得二进制.gzip,并将其移动到另一个文件夹,并按照以下步骤以Parquet格式存储它。
我是新的管道,不确定何时使用复制数据与数据流等。
如果有人可以用打印屏幕或非常清楚地显示步骤,那将是非常感谢的!
谢谢,安德斯
发布于 2022-08-21 04:40:21
根据微软官方文件
二进制数据集只能在Copy activity、GetMetadata activity或Delete activity中使用。我们不能在Dataflow activity中使用二进制数据集。此外,当使用二进制数据集时,服务不解析文件内容,而是按原样对待文件内容。
现在,即使在Copy activity中使用二进制数据集,也不能将其转换为其他格式,而只需要将其从二进制数据集复制到二进制数据集。
因此,您需要更改您的方法,并为您的用例尝试一些编程方法。
发布于 2022-08-22 13:54:17
这是我们使用的一个常见模式,特别是对于SFTP中的更大的ZIP文件,下载可能需要几个小时。
https://stackoverflow.com/questions/73428203
复制相似问题