我使用从外部API获取的数据为我的用户服务。现在,我不知道这个API什么时候会有新的数据,例如,使用Node如何才是最好的方法?
我已经尝试过setInterval和节点调度,并使它工作,但它不是昂贵的CPU吗?例如,在超过一天的时间里,我会到达这个端点,每分钟检查一次新数据,但它可能每五分钟或更长时间就有新数据。
问题是,这个外部API不是由我运行的。唯一的方法,以检查更新击中它每分钟?是否有任何模块可以在Node中这样做,或者有任何更适合的方法?
用例1:为全国每个城市调用天气API,并在给定城市下雨时将数据保存到我的数据库中。
用例2:当给定的飞利浦彩灯在打开时打开时,向用户发送通知,而不必点击端点来检查它是否开着。
我很感谢有时间讨论这件事。
发布于 2018-04-11 01:22:17
如果这个外部API无法在有新数据时通知您,那么您唯一能做的就是“轮询”它以检查新数据。
您必须决定在特定的应用程序中为轮询设计什么“有效的设计”,并考虑到数据的类型和客户端的需求(新数据的可接受延迟是什么)。
您还需要确保您的服务没有违反任何服务条款与您的轮询计划或运行的速率限制,这可能会拒绝您访问服务器,如果您使用“太多”。
唯一的方法,以检查更新击中它每分钟?
除非API提供了某种通知功能,否则除了在某个间隔进行轮询之外,没有其他方案。每分钟轮询都相当快。你的客户真的需要不到一分钟的信息吗?或者,如果信息有5分钟的时间,这真的没有什么区别。
例如,在您的天气示例中,客户端不需要比每10-15分钟更新一次更频繁的温度更新。
是否有任何模块可以在Node中这样做,或者有任何更适合的方法?
不是的。不怎么有意思。您可能只需使用某种计时器(重复的setTimeout()或在node.js应用程序中的setInterval() )来重复执行API操作。
用例:为全国每个城市调用天气API,并在给定城市下雨时将数据保存到我的数据库中。
尝试从外部API预保存所有可能的数据可能是一个失败的提议。您实际上是在“刮”外部API中的所有数据。这很可能违反服务条款,也可能与利率限制相抵触。而且,这不是很实际。
相反,您可能希望根据需要(当客户端请求菲尼克斯的数据时,然后才开始收集菲尼克斯的数据),然后一旦建立了对特定类型数据(特定城市中的温度)的需求,那么您可能希望更定期地预缓存这些数据,以便能够通知客户更改。如果过了一段时间,没有客户端要求从菲尼克斯获取数据,那么在客户端再次建立需求之前,您将不再请求凤凰的更新。
我已经尝试过setInterval和节点调度,并使它工作,但它不是昂贵的CPU吗?例如,在超过一天的时间里,我会到达这个端点,每分钟检查一次新数据,但它可能每五分钟或更长时间就有新数据。
发出远程网络请求并不是CPU密集型操作,即使您每分钟都这样做。node.js使用非阻塞网络,因此在大多数情况下,在网络请求期间,node.js什么都不做,也根本不使用CPU。CPU将被短暂使用的唯一时间是当您首先发送API请求时,然后当您收到API调用的结果并需要处理它时。
您是否真的需要“轮询”每一分钟取决于数据和客户的需要。我会问你自己,如果你每5分钟检查一次新数据,你的应用程序是否能正常工作。
发布于 2018-04-11 01:27:39
我用于更新的方法将包含在计划的批处理/powershell/bash文件中的代码之外。在windows中,您可以根据上一次运行后的一天时间或持续时间来调度任务,因此您可以运行一个简单的命令,该命令将杀死应用程序5分钟,运行npm更新,然后在关闭外壳之前重新启动应用程序。
这样,您将远离API并将代码保持在最低限度,如果您的代码在更新中的Node包中,那么一旦您进行了严重的应用程序更改,或者您需要关闭服务器以维护和更新低级代码,它就会出现。
对于你来说,这是一种重量轻的解决方案,也是我在工作场所使用过一两次的方法。有很多选择,如果这不是你要找的,我可以继续照顾你。
https://stackoverflow.com/questions/49764969
复制相似问题