首页
学习
活动
专区
圈层
工具
发布

定价
EN

Stack Overflow用户
提问于 2021-04-12 18:04:22
回答 1查看 587关注 0票数 0

我想使用谷歌Colab免费TPU与自定义数据集,这就是为什么我需要上传到GCS。我在GCS中创建了桶并上传了数据集。

我还读到,GCS中有两类具有数据的操作:操作类A和操作类B,[参考]

我的问题是:从Google中的GCS访问数据集是否属于这些操作类之一?使用GCS给Colab TPU的平均价格是多少?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2021-05-26 00:56:16

是的,访问GCS桶中的对象(文件)将导致您的计费帐户可能收费,但您可能需要考虑其他一些因素。让我解释一下(很长的答案,我事先很抱歉):

Google平台服务使用场景后面的API执行多个操作,例如显示、创建、删除或编辑某些资源。

云存储也不例外。正如在云存储文档操作中提到的,可以分为两类: JSON执行的操作和XML执行的操作。

在云控制台或客户库 (用于通过代码与Python、Java、PHP等语言交互的操作)上执行的所有操作,在默认情况下都将使用JSON进行操作。让我们专注于这件事。

我希望您注意每个操作列下的方法名称:

结构如下:

代码语言:javascript
复制
service.resource.action

由于所有这些方法都与云存储服务相关,所以在所有这些方法中看到存储服务是正常的。

在操作B列中,第一个方法是storage.*.get。在其他列中没有其他get方法,这意味着从桶(读取元数据)或对象(通过代码读取文件、下载文件等)中检索信息。在桶内将被视为此方法的一部分。

在讨论如何计算成本之前,让我补充一句:不仅向您收取操作本身的费用,而且还对在网络中传输的文件的大小收费。以下是两种最常见的场景:

  1. 您正在与来自另一个GCP服务的文件进行交互。由于它使用的是内部GCP网络,所以收费并不高。如果您决定这样做,我建议您使用资源(App Engine、Compute Engine、Kubernetes Engine等)。在同一地点避免额外费用。请查一下GCP内的网络出口费
  2. 您正在与GCP之外的环境进行交互。这是您与其他服务交互的场景,比如Google (即使它是Google服务,它也在云平台之外)。请参阅云存储的一般网络使用定价

现在,让我们来谈谈存储类,它也会影响对象的可用性和定价。根据存储桶的创建位置,您将对医生们中提到的存储数据量收取费用。

即使近线类、Coldline类和Archive类是存储方面最便宜的类,它们也会对检索数据收取额外费用。这是因为这些类用于存储不常见的数据。

我认为我们已经涵盖了所有内容,现在我们可以转到一个重要的问题:所有这些都要花费多少?--这取决于您的文件大小、与它们交互的时间以及存储类。

假设在北美有一个标准桶,数据集为20 GB,每天从Google Colab读取10次,我们可以计算如下:

标准存储:每GB 0.020美元

代码语言:javascript
复制
$0.020 * 20 = $0.4USD

标准操作的B类操作(每10 000次操作):0.004美元

代码语言:javascript
复制
Given that you are only charged $0.004 per 10,000 we can say that each operation 
costs $0.0000004 USD so 10 operations will be $0.000004 USD.

前往全球目的地(不包括亚洲和澳大利亚):每GB 0.12美元

代码语言:javascript
复制
$0.12 * 20 because it is the size of our file = $2.4 USD 
10 times we are reading this doc per day: 2.4 * 10 = $24 USD

在这个例子中,您将每天支付:0.4 + 0.000004 + 24 =24.400004美元。另一个例子可以在定价概述一节中找到。

最后,好消息是,Google提供了每月重置的始终免费使用限制。我谨附上以下链接中的表格:

这意味着:如果在整个月中,在标准类桶中存储的GBs少于5,000 1GB,则执行的B类操作少于50,000次,A类操作少于5,000次,通过网络发送的内存不足1GB,则不会支付任何费用。

一旦您通过了这些限制,收费将开始,即,如果您有一个15 of的数据集,您将只收取10 of。

票数 2
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/67063455

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档