我的波束/数据流管道涉及一些数据处理,它使用Linux CLI工具(具体地说,osmium-tool版本>= 1.9.1),该工具仅适用于一些较新的Ubuntu发行版(cosmic或disco)。我找不到有关Dataflow Worker操作系统规格的任何文档,也找不到它是否可配置。
osmium-tool
如有任何帮助,将不胜感激,谢谢!
发布于 2019-10-11 04:27:55
Beam可移植性工作的目标之一是允许这样的定制。尽管目前它仍处于实验阶段,但您可以按照https://beam.apache.org/documentation/runtime/environments/上的说明完全配置您的用户代码运行的环境。
https://stackoverflow.com/questions/58324689
相似问题