我可以使用spring-cloud-dataflow(kubernetes)来执行递归任务吗?我需要根据当前结果创建流的新实例(递归)。我需要任务的分布式处理。
1)是否需要使用message-source?据我所知,数据流使用自己的消息代理(兔,kafka)。我是否需要安装另一个代理,或者我可以在数据流代理中创建队列?
2)我可以在没有队列的情况下完成吗?
3)流与任务?
thx
发布于 2016-12-01 13:41:27
我可以使用spring-cloud-dataflow(kubernetes)来执行递归任务吗?我需要根据当前结果创建流的新实例(递归)。我需要任务的分布式处理。
您正在寻找的是我们在Spring XD中拥有的“组合任务”feature,它在路线图中将其移植到Spring Cloud数据流中。同时,您可以通过以下方式以编程方式调用任务:基于上游任务结果的REST-APIs或Dataflow Template。
1)是否需要使用消息源?据我所知,数据流使用自己的消息代理(兔,kafka)。
SCDF 没有有自己的消息代理。我们提供的是一个绑定器抽象,并且有Kafka,Rabbit,Google pub/sub和其他的实现。您可以选择最适合您的需求的绑定器实现。
我是否需要安装另一个代理,或者我可以在数据流代理中创建队列?
SCDF不需要代理,但反过来,它是流管道中包含的“应用程序”需要它们。请观看今年早些时候来自SpringOne的recording会议。本文涵盖了基础知识和体系结构细节。
2)我可以在没有队列的情况下这样做吗?
SCDF中的流处理需要消息传递中间件。您可以选择您选择的中间件。默认情况下,我们对rabbit和kafka都使用release streams apps。
流vs任务?
不清楚你这么说是什么意思。
https://stackoverflow.com/questions/40844409
复制相似问题