当需要处理数据时,我希望将数据保持在近线上,并将其转换为区域性存储类。
它将需要被访问超过一个月一次,所以它不能停留在近线。
当我需要使用它时,我想把它切换到区域,做大量的读取/处理,切换回近线。
这可行吗?像这样转换存储类需要花费很多钱吗?
发布于 2018-09-26 16:30:36
要更改存储类(例如,使用带有-s选项的gsutil重写命令),对于每个对象,您将用新一代覆盖对象,该新一代包含三个成本组件:
根据处理作业运行的时间长短,简单地将所有对象复制到区域桶中,在那里运行计算,然后从该桶中删除对象,成本效益可能更高。这样做可以避免早期的删除费用,以及需要执行额外的A类操作来将数据重写回近线存储类。但是,这是否具有更高的成本效益取决于处理作业运行多长时间,因为在此期间,您将支付两个数据副本(近线副本和区域副本)。
https://stackoverflow.com/questions/52520720
复制相似问题