首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >使用Google Cloud Dataflow SDK读取流数据

问使用Google Cloud Dataflow SDK读取流数据
EN

Stack Overflow用户
提问于 2016-12-23 11:54:20
回答 1查看 537关注 0票数 0

我正在开发一个物联网应用程序,我需要从PubSub主题中读取流数据。我想使用Google Cloud Dataflow SDK读取这些数据。我使用的是Java 1.8

我正在使用Google Cloud Platform的试用版。当我使用PubSubIO.Read方法读取流数据时,我在日志文件中收到错误,表明我的项目没有足够的CPU配额来运行应用程序。

所以我想用Google Cloud Dataflow SDK来读取流数据。

谁能让我知道在哪里可以找到使用Google Cloud Dataflow SDK读取流数据的完整示例。

提前谢谢。

EN

回答 1

Stack Overflow用户

发布于 2016-12-23 13:14:57

在Complete Examples下的云数据流文档中提供了许多完整的示例,并在Github上进行了链接,也位于Complete Examples下。

根据您的错误消息,您确实没有足够的CPU配额来运行默认的3x4线程(n1-standard-4)工作线程。CPU quota for Google Cloud trial是8个CPU。

您可以使用更少的工作进程(例如--numWorkers=1)或不同的机器类型(--workerMachineType=n1-standard-1)来configure your job以减少CPU需求

票数 2
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/41294957

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档