可能的稳定性:谷歌云PubSub到云存储

Question

我有一个数据流流作业，它将PubSub消息写入一个文件，该文件存储在3分钟窗口内的云存储中。几个小时后，我注意到了“按阶段划分的数据新鲜度”图，它显示了“可能的平稳性”和“可能的缓慢性”。

我已经检查了这些日志，信息日志显示了以下内容：“将套接字默认超时设置为60秒。”；“套接字默认超时为60.0秒。”；“试图刷新以获得初始access_token。”；“由于401 (尝试1/2)刷新”。最后的日志每隔几分钟重复一次，持续了四个小时，直到作业显示出可能的缓慢/停滞。

我不太清楚这里发生了什么事。这些日志与为什么工作慢下来而陷入僵局有关吗？

Answer 1

“潜在的稳定性”和“潜在的缓慢性”基本上是一样的，它们是文档化的这里。

原木可能是红鲱鱼。

您可以按照这里的类别查看所有可用的日志:职务消息、工作人员、员工启动等等。

• 确定是否存在工作日志，以确定工作人员是否已成功地通过安装依赖项启动；
• 搜索“正在进行的操作”，以查看是否有任何工作项花费了太多时间；
• 搜索正在阻止流作业取得进展的工作人员中是否有任何错误。