我正在尝试理解,在使用resource manager和without resource manager的N节点集群中运行spark作业有什么区别?
请分享
发布于 2020-05-28 14:31:47
集群管理器负责获取集群上的资源并将其分配给spark应用程序。参考:Spark architecture from docs
上运行的集群管理器为跨应用程序的调度提供了便利。参考:here
因此,如果没有任何集群管理器,spark作业将无法获取集群上的资源。
https://stackoverflow.com/questions/62058086
复制相似问题