GCP dataproc在哪里存储笔记本实例？

Question

我使用Dataproc创建了一个星火库集群，并将Jupyter Notebook附加到其中。然后，我删除了集群，我以为笔记本已经不见了。但是，在创建了另一个集群(连接到同一个Bucket)之后，我可以看到我的旧笔记本。这是否意味着笔记本(或他们的检查点)存储在我的桶里？或者它们存储在哪里，以及如何确保它们被删除？

Answer 1

Dataproc允许创建分布式计算集群(Hadoop、Map reduce、spark、.)。它只用于处理(您可以在内部HDFS系统中保存临时数据)，但是所有的输入和输出都是在一个桶中完成的(Cloud是->的新/内部版本，它是Google公开发布的规范的开源实现。从那时起，Google已经对系统进行了内部改进(云存储)，但它仍然与HDFS兼容。

因此，是的，数据仍然在云存储桶中是正常的。