我正在开发一个物联网应用程序,我需要从PubSub主题中读取流数据。我想使用Google Cloud Dataflow SDK读取这些数据。我使用的是Java 1.8
我正在使用Google Cloud Platform的试用版。当我使用PubSubIO.Read方法读取流数据时,我在日志文件中收到错误,表明我的项目没有足够的CPU配额来运行应用程序。
所以我想用Google Cloud Dataflow SDK来读取流数据。
谁能让我知道在哪里可以找到使用Google Cloud Dataflow SDK读取流数据的完整示例。
提前谢谢。
发布于 2016-12-23 13:14:57
在Complete Examples下的云数据流文档中提供了许多完整的示例,并在Github上进行了链接,也位于Complete Examples下。
根据您的错误消息,您确实没有足够的CPU配额来运行默认的3x4线程(n1-standard-4)工作线程。CPU quota for Google Cloud trial是8个CPU。
您可以使用更少的工作进程(例如--numWorkers=1)或不同的机器类型(--workerMachineType=n1-standard-1)来configure your job以减少CPU需求
https://stackoverflow.com/questions/41294957
复制相似问题