如何最好地管理外部进程队列

Question

我的场景是一个web应用程序，它创建了需要由R脚本处理的作业。我们现在让web应用程序执行一个SQL存储的proc，执行R脚本。然而，我们很快意识到这是行不通的。第一个作业占用了大量内存，然后所有后续作业都失败了。我们确实为外部进程预留了40%的服务器内存，如MSFT的文档中所描述的：

https://learn.microsoft.com/en-us/sql/advanced-analytics/administration/how-to-create-a-resource-pool?view=sql-server-2017

我感谢你的任何建议或建议。

Answer 1

您可以有一个运行存储过程的后台作业(SQL代理或其他作业)，确保每次只运行一个实例。

web应用程序，而不是直接调用过程，只需将一行写入“作业表”或“队列表”，后台进程就可以完成。