我有两个Django网站,创建一个Spark会话到一个集群,这是运行在Mesos上。
问题是,无论Django首先启动什么,它都会创建一个框架,永久地占用100%的资源,它会抓住它们,即使空闲也不会让它们离开。
我不知道如何让这两个框架只使用所需的资源,并让它们同时访问Spark集群。
查看了spark调度,spark和mesos的动态资源,但似乎都不起作用。这是可能的吗?或者我应该改变方法吗?
发布于 2021-02-16 21:42:31
使用动态分配自行求解。
https://stackoverflow.com/questions/65718966
复制相似问题