首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >将CSV文件传输到BI应用程序的正确方法?

问将CSV文件传输到BI应用程序的正确方法?
EN

Stack Overflow用户
提问于 2017-05-23 12:33:40
回答 1查看 58关注 0票数 0

我们正在做一个BI应用程序,我们的客户每天给我们发送数据文件。我们正在使用CSV文件进行数据交换,因为我们的客户习惯于使用Excel查看数据,而且他们还没有准备好在他们的系统上使用API (我们希望几年后我们能够使用XML/JSON We服务)。

目前的数据传输是用FTP (实际上是SFTP)进行的。我们的客户在FTP服务器上自动上传文件,我们有一个CRON任务,它监视文件是否已经发送。

但是,这样做有许多缺点:

  • 我们无法可靠地知道上传是否已经完成,或者是否仍在进行中(我们要求他们上传一个临时名称的文件,然后将其移动,但他们中的许多人仍然没有这样做)
  • 因此,我们可以尝试猜测,并考虑上传是完成的,如果足够的时间已经过去。但是FTP协议不允许获取服务器时间,而且时间可以被取消。所以我们可以上传一个空文件并读取它的日期来知道服务器的时间。但我们需要书面许可才能这么做。
  • FTP协议允许暂停上传..。

然后,我们正在考虑通过要求我们的客户直接上传到我们的应用程序,使用HTTPS文件传输。这更可靠,但不太方便:

  • 我们的客户上传后无法检查文件的内容。
  • 我们必须在服务器上小心上传大小和超时。
  • 文件可能相当大(高达300 to ),所以最好在上传之前将其压缩(可以将大小缩小到10%)。
  • 这对我们来说不仅仅是一台FTP服务器(我们需要创建UI,上传进度,列出文件下载回来,.)

还有其他解决办法吗?BI应用程序通常如何共享数据?HTTPS对我们来说是一个好的解决方案吗?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2017-06-06 13:46:18

我们找到了一个解决方案,即webdav服务器。我们使用的是Nextcloud,它提供了一个在线接口,以及webdav协议的脚本访问。

它比FTP更可靠,因为文件只有在上传完成后才会出现。

在我们的应用程序上,它比HTTP上传更好。我们不需要处理文件上传,创建界面,.

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/44134972

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档