如何将csv文件从GCP云存储桶传输到ftp服务器

Question

我们需要将csv文件从GCP云存储传输到ftp服务器，如何实现？

我们能用bigquery工具将这个文件直接传输到ftp吗？

或者我们需要下载一个服务，然后上传到ftp上？

Answer 1

编辑:啊...看来我错过了你的Java标签。好吧，如果你对生成子进程没意见，那么下面的解决方案应该是可行的。否则，请参考支持的Java API for GCP。从今天起它是this one

如果您拥有对ftp服务器的ssh访问权限，则只需使用Google Cloud SDK：

gsutil cp gs://[BUCKET_NAME]/[OBJECT_NAME] [SAVE_TO_LOCAL_FTP_DIR]

否则，以下命令通过管道从GCP ->本地计算机-> FTP中传输数据：

gsutil cp gs://[BUCKET_NAME]/[OBJECT_NAME] - | curl -T - ftp://user:PASS@ftp-server.com/filename.ext

[OBJECT_NAME]之后的第一个-告诉gsutil写入STDOUT，而不是普通文件，而第二个-告诉curl -T从STDIN读取。对于外行来说，|是一个bash管道，指示将第一个程序的STDOUT传递给下一个程序的STDIN。