当我查看Google平台的数据流时,我有一个关于FlexRS类型的问题。:)
据我所知,数据流支持批处理和流,但我很好奇是否存在FlexRS类型。
简单地理解FlexRS在文档中很难识别,只是它比典型的工作流便宜。
我能请你解释一下FlexRS吗?
谢谢。
发布于 2020-12-03 10:00:57
数据流是一种完全管理的批处理和流分析服务,它通过自动标度来最小化延迟、处理时间。
对于Dataflow的FlexRS,ou可以在不需要时间的批处理管道中使用,例如可以在特定时间窗口内完成的日常或每周作业。通常,Dataflow同时使用可抢占的和正规的工作人员来执行您的工作。它考虑到了先发制人的to的可用性,并根据文档对您进行收费。
另一方面,https://cloud.google.com/dataflow/docs/guides/flexrs为CPU和批处理的内存定价提供了折扣率。它可以根据资源的可用性,将数据流批处理作业延迟到6小时窗口内,以确定启动作业的最佳时间点。启用后,FlexRS默认为员工池中90%的员工选择可抢占的VM。
因此,FlexRS仅用于非时间临界批处理负载。
https://stackoverflow.com/questions/65120375
复制相似问题