我有一个Matillion管道,它从SFTP服务器下载一个文件,并将该文件存储在Azure blob容器中,称为加密文件。
文件是通过OpenSSL加密的,我不确定应该采取什么步骤来解密文件,并将其存储在另一个容器中,称为解密文件。
我想到的一个想法是使用bash或Python脚本来完成此任务,但我不确定如何开始。
最好的方法是什么?
发布于 2021-01-28 21:51:21
您可以使用Python组件来解密文件。您将需要使用python azure blob存储库来访问该文件并将其下载到matillion服务器。然后使用python SSL库对其进行解密,然后将其放回blob存储中。完成后,记得从matillion服务器上删除文件(使用/TMP文件夹)。
访问How to decrypt OpenSSL AES-encrypted files in Python?
这种方法的缺点是,它迫使您将数据传输到matillion服务器上,因此如果数据在较小的一侧,这将很好地工作。如果数据非常大,则需要将其拆分成块,并使用文件迭代器组件将块提供给python脚本
https://stackoverflow.com/questions/65902604
复制相似问题