首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Google Dataflow -调度

Google Dataflow -调度
EN

Stack Overflow用户
提问于 2018-07-14 00:39:40
回答 0查看 1.7K关注 0票数 3

在谷歌云平台-数据流中,当流式传输未绑定的PCollection (比如使用PubSubIO的PubSub主题)时,有没有一种有效的方法来启动和停止数据流中的波束管道?(示例在一天开始时运行,在一天结束时结束)是让调度程序拥有Cron App engine服务并启动上面的管道作业然后停止该作业的唯一方法吗?只是看看有没有其他的选择。

另外,如果我为无界PCollection选择窗口(比如从PubSub),有没有办法把文件写到一个可配置的目录中呢?每个窗口的每小时目录?我看到它为每个窗口创建一个文件。

EN

回答

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/51329540

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档