Databricks允许为集群创建两种风格:高并发和标准。高并发不接受Scala代码...:- (.该选项对于交互式群集可见,但对于自动群集不可见。
我关心的是一个流应用程序,其中一个作业被提交以执行iot获取。因此,这将是一个作业,问题是关于集群:它是高并发还是标准并发?
谢谢!
发布于 2019-11-26 03:22:10
这取决于您是在作业定义中使用新的自动群集,还是选择使用现有群集。自动集群被认为是数据工程负载,并且不支持高并发性(这无论如何都没有任何意义,因为会为每个作业创建作业集群)。
https://stackoverflow.com/questions/59037992
复制相似问题