首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >验证从云复制的数据的几个TBs的软件或服务

问验证从云复制的数据的几个TBs的软件或服务
EN

Software Recommendation用户
提问于 2014-11-18 20:37:24
回答 1查看 86关注 0票数 2

第一篇文章,希望它能帮助其他人在网上存储大量数据。

我使用云服务Bitcasa (不推荐)为我的媒体库和个人备份服务。他们最近从根本上改变了他们的商业模式,并给出了为期3周的提价12倍的通知,向像我这样的测试版客户提供为期一年的订阅服务,这些客户多年来一直在帮助支付客户的费用,同时他们还在重复他们的产品。我建议你离他们远点。我有过,在违反合同后永远不会信任他们,所以我急于下载和验证超过7TB的数据。

已经从Bitcasa下载了7TB,似乎有些已经损坏。目前还不清楚原始数据是在原始传输中被破坏了,还是在其数据库服务器中被破坏了,或者在下载中发生了错误。法院下令将客户扩展到11月20日的DL数据,但在Bitcasa服务更改之前,数据必须是DLed。大部分数据是DLed,但我对转会没有信心。

简而言之,在Mac环境中,有什么好的、快速的、可靠的软件/服务来根据我下载的副本验证在线数据的TBs?我的ISP充其量只有100/10的传输速率。我不怕命令行。文件计数可能在几十万,混合大小,.txt到GB大小的媒体。考虑到时间限制,如果可能的话,验证应该是多线程的。欢迎任何建议!

干杯!

EN

回答 1

Software Recommendation用户

发布于 2014-11-19 06:04:34

如果在线服务提供或允许服务器上的计算具有合理的质量散列功能(例如: MD5、SHA-1等),则可以使用python脚本获取在线值并计算每个文件的下载值,然后报告问题文件或重新下载。需要查看的库是URLLib2、hashlib和OS.walk。

票数 1
EN
页面原文内容由Software Recommendation提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://softwarerecs.stackexchange.com/questions/14010

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档