如何加载我的train.tfrecord文件在土星云运行通过达克？

Question

我正在进行目标检测，我有两个记录文件。Train.tfrecord(1.6GB)和Test.tfrecord(65 and )文件。如何在土星云中加载培训文件，因为我希望使用土星云中的Dask来加快培训时间？

Answer 1

正如@SultanOrazbayev所提到的，由于土星运行在AWS上，最好的方法是将数据放入S3桶中。然后，您可以使用您喜欢的任何库来访问它。通常我们建议使用s3fs。

注:我在土星云工作。