Java文件长度()和lastModified()对100万个文件执行得很慢

Question

我在远程服务器上有100万个文件。这些文件经常更新。在检查后的某个特定时间，我们在本地服务器上下载这些文件。此下载基于远程和本地服务器文件之间文件大小和修改时间的更改。

1. 这种检查(使用length()和lastModified())在本地服务器上进行了大量IO调用，并且需要同时使用length和lastModified() --这是一个场景。
2. 请注意:远程服务器是FTP服务器，我无法控制它。我有100-200远程FTP服务器来获取数据.每个FTP服务器都有一个线程。 请建议有效的解决方案，我可以减少对本地文件的IO调用，与远程服务器没有问题。 谢谢。

Answer 1

网络通话费用很高。我建议您创建一个服务器，该服务器将接收在该日期之后修改的文件的日期和返回列表，并在远程计算机上运行它。然后只下载您想要的文件。

如果远程主机是linux服务器，则只需运行具有适当参数的find即可获得已更改的文件列表。在本例中，请咨询unix.stackexchange.com。