首页
学习
活动
专区
圈层
工具
发布

存储三兄弟:块存储、文件存储、对象存储,到底怎么选?一篇讲透

不讲那些云里雾里的概念,就讲人话,讲实际怎么用。 先搞清楚一个根本问题:数据是怎么存的? 在聊三种存储之前,有个底层的东西得先想明白——不管什么存储,数据最终都是落在磁盘上的。...这就像你存东西到快递柜——你不需要知道快递柜内部怎么排列的,你只需要一个取件码。...你做一次 PUT 或 GET 请求,延迟可能在几十毫秒到几百毫秒,跟块存储的亚毫秒级延迟比差了不少[3]。 对象存储实际怎么用 场景一:图片和视频存储。 这是最经典的场景。...文件存储扩展性最差,单文件系统容量有上限,跨节点扩展需要做分布式文件系统,复杂度很高[3]。 成本 对象存储 文件存储 存储(单位成本)。...实际选型:别纠结,看场景 讲了这么多理论,落到实际怎么选?我给几个原则。 跑数据库?选块存储。 这个没什么好商量的,数据库对延迟和 IOPS 的要求很高,块存储是唯一靠谱的选择。

1.8K21

数据存哪:云硬盘、对象存储 COS、文件存储怎么选-UserStory

摘要: 数据存哪,看数据类型和访问方式:结构化数据和系统程序用云硬盘(块存储),图片视频文档等海量非结构化文件用对象存储 COS,多台服务器要共享读写同一批文件用文件存储。三者定位不同、不可互相替代。...云硬盘、对象存储 COS、文件存储是三种不同的存储,常被新手搞混。它们不是「谁更好」的关系,而是「各管一类数据」——云硬盘像电脑的硬盘、COS 像无限大的网盘、文件存储像多人共享的网络文件夹。...三种存储的本质区别 先用类比建立直觉: 存储 本质 类比 怎么访问 云硬盘 CBS 块存储 电脑的硬盘 挂载到一台服务器,像本地盘用 对象存储 COS 对象存储 无限大的网盘 通过 URL/API/SDK...访问 文件存储 文件存储 多人共享文件夹 多台服务器挂载共享读写 关键差异在「谁能访问、怎么访问」:云硬盘绑定单台服务器、文件存储支持多台共享、COS 通过网络 API 随处访问。...用户上传的文件、附件 对象存储 COS 独立文件,网络访问 数据库备份、归档文件 对象存储 COS 海量存储,可降冷省钱 多台服务器共享的文件 文件存储 支持多机共享读写 一个典型网站的存储搭配 把三者放到一个真实网站里看怎么配合

24210
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    文件存储

    ,最后把数据块再写回磁盘 文件的存储 文件的数据在磁盘上的存储方式有哪几种?...连续空间存储方式 非连续空间存储方式 连续空间存储方式 连续空间存储使用前必须要知道文件的大小,这样文件系统才可以在磁盘上找到一块连续的空间分配给文件。文件头里需要指定起始块的位置和长度。...连续空间存储优点? 文件数据紧密相连,一次磁盘寻道便可读出整个文件,读写效率高。 连续空间存储缺点?...索引方式优点: 文件的创建、增大、缩小很方便 不会有碎片问题 支持顺序读写和随机读写 索引方式缺点: 如果文件很小,一个块就可以存储所有数据,此时还需要额外分配一块磁盘空间来存储索引,造成了存储的开销。...Unix中文件数据的存储方式?

    5.4K30

    本地磁盘、对象存储、自建文件服务:企业系统附件存储方案怎么选

    存哪里、怎么备份、多实例怎么共享,方案没选对,轻则磁盘爆满系统宕机,重则服务器故障附件全丢。...主流的文件存储方案有三种:本地磁盘存储、对象存储(COS/OSS)、自建文件服务(FastDFS/MinIO)。这篇文章把三种方案的真实成本摆清楚。一、三种方案的真实面目本地磁盘存储。...对象存储(腾讯云 COS、阿里云 OSS)。 文件直接传云端,按存储量和流量计费,天然多副本、天然高可用、天然支持 CDN 加速。...混合场景(内网生产+外网分发): 内网自建存储为主,需要对外分发的文件(如给客户的电子对账单)同步一份到对象存储生成临时链接。两套各司其职,比强行打通安全边界明智。...员工离职他传的文件归谁?定好规则写进系统,否则几年后存储里一半是没人认领的"孤儿文件",清理时谁都不敢删。

    48400

    e租宝都被查了,P2P还安全吗?

    有关e租宝公司被调查的新闻在微博、朋友圈被引爆刷屏,700多亿成交资金“打了水漂”,P2P再次成为金融业甚至经济领域的热门话题。许多人看中P2P理财的高收益,却忽视其中的风险。...P2P网站的安全性 除了诈骗平台蓄意骗取投资者钱财之外,P2P网贷网站广泛存在安全漏洞,极易导致黑客攻击。资金安全是每一个网贷平台应当首先保障的,而保障资金安全的首要前提是保障网站的安全。...图7 P2P平台存在的一些安全性问题 我们对部分P2P网站进行了抽样安全监测,目前发现有131家网站存在不同类型的安全漏洞。...4、完善的法律和政策保障 正规平台从事业务应当是合法合规的,不进行拆标和虚标行为,每个借款项目都有合法的电子合同、财务抵押凭证等必须的文件文书。...6、重视平台自身和用户信息的安全 平台网站建设充分重视安全问题,通过加密连接、防火墙、二次验证等技术手段保证数据和信息的安全。并有严格的IT管理规范,防止出现人为的安全事故。

    3.7K80

    文件存储、块存储、对象存储区别(一)

    在计算机系统中,存储是指将数据保存在持久化介质上,以便以后访问和使用。不同类型的应用程序可能需要不同类型的存储,以满足其特定的需求。...文件存储文件存储是一种基于文件系统的存储方式,将数据保存在文件中,这些文件可以被多个应用程序并发地访问。...这种存储方式通常用于需要读取和写入整个文件的应用程序,如文档管理、图片、视频、音乐等文件存储和共享等应用。文件存储通常由一个共享存储设备提供,多个计算机可以通过网络访问该设备中的文件。...其中,共享存储设备可以是NAS(网络附加存储器),它是一种基于文件共享的存储设备,也可以是SAN(存储区域网络),它是一种基于块的存储设备。...存储提供者是一个NAS设备,使用“nfs-storage”存储类提供文件共享服务。

    9.1K20

    文件存储、块存储、对象存储区别(二)

    块存储块存储是一种基于块的存储方式,将数据保存在块设备上,块设备通常是一种硬件设备,例如硬盘、固态硬盘或闪存驱动器。...块存储通常由一个存储阵列提供,可以被多个计算机使用,每个计算机都可以访问阵列中的块存储设备,并在其上创建文件系统。块存储通常用于需要随机读写的应用程序,例如数据库、虚拟化、高性能计算等应用。...在块存储中,数据是以块的形式传输,并且每个块可以被独立地访问和管理。...块存储通常使用iSCSI(Internet Small Computer System Interface)协议将块设备连接到计算机系统。...存储提供者是一个iSCSI存储设备,使用“iscsi-storage”存储类提供块存储服务。

    8.5K10

    文件存储、块存储、对象存储区别(三)

    对象存储对象存储是一种分布式存储方式,将数据保存在对象中,每个对象都有唯一的标识符,可以通过该标识符访问对象。...对象存储通常使用REST API(Representational State Transfer Application Programming Interface)来访问和管理对象,因此可以通过公共互联网访问...对象存储通常用于需要海量存储的应用程序,例如大数据、人工智能、物联网等应用。对象存储通常由一个对象存储集群提供,该集群由多个存储节点组成,可以水平扩展以增加存储容量和吞吐量。...下面是一个使用Amazon S3提供对象存储的示例:apiVersion: v1kind: Podmetadata: name: example-podspec: containers: -...存储提供者是Amazon S3存储服务,使用“s3-storage”存储类提供对象存储服务。

    8.3K10

    块存储,文件存储及对象存储 比较

    应用:对网速要求高、对数据可靠性和安全性要求高、对数据共享的性能要求高的应用环境中。...文件存储: 通常NAS产品都是文件级存储,文件存储其实普通拿一台服务器/笔记本,只要装上合适的操作系统与软件,就可以架设FTP与NFS服务了,架上该类服务之后的服务器,就是文件存储的一种了。...操作对象是目录和文件,物理存储位置 是由 文件服务器对应的文件系统来决定的(比块存储多一个过程:判断参数文件 应该存储到哪个逻辑目录上。)         3....文件存储,就是在文件系统一层对外提供服务,系统只用访问文件系统一级就可以,各个系统都可以根据接口取访问。 访问协议:文件存储,主要操作对象是文件和文件夹。...2.对象存储的成本比普通的文件存储还是较高,需要购买专门的对象存储软件以及大容量硬盘。如果对数据量要求不是海量,只是为了作文件共享的时候,直接用文件存储的形式就好了,性价比高。

    10.6K11

    浅谈文件存储

    空调开了半个小时后依旧没什么用,可能它比较老了吧,于是打开电脑,跑了十几个运算任务,CPU飙升到90%,手放在笔记本电脑键盘上,才感到一丝暖意,可比那空调强得太多了,只是这电脑再多烧下,估计要爆炸了,那这个冬天又要怎么过呢...前言 今天分享一下文件存储的一些心得,在软件开发过程中,必然会涉及到文件存储,文件存储的方案有很多,市面上也出现了很多文件系统,我们需要根据自己的需求去选择选择存储方式和规格等等,例如是采用公有云存储还是私有云存储...私有云存储 对于政府项目,或者一些大型公司的项目,对于文件的安全和隐私比较注重,一般都会采用私有云文件存储,自己搭建文件系统,数据存储在自己的服务器上,它的好处是文件数据全部在自己的手上, 公有云储存...混合云存储 有一些场景可能需要用到混合云存储,有一些公司文件存储在自己的文件服务器上,但是如果出现一些需求,需要去调整大量的内外网环境,可能对某些业务产生一些安全隐患,并且产出不成正比,这时候可能就会选择将文件存储在公有云上...,再如FastDFS的社区不怎么活跃,且安装使用难度较大,那么是否要选择它呢,我想我们心中都有答案,还有文件的存储格式,分区设置等等等等,都会有很大影响。

    4.8K30

    CSV文件存储

    CSV ,全称为 Comma-Separated Values ,中文可以叫逗号分隔值或字符分隔值,其文件以纯文本形式存储表格数据。...由于 csv 模块遵循它自己的换行处理标准,规定 newline=‘’ 总归是安全的。 按照官方文档所说的内容,我们修改上面的例子。...另外,如果接触过 pandas 等库的话,可以调用 DataFrame 对象的 to_csv() 方法来将数据写入 CSV 文件中。 读取 我们同样可以使用 csv 库来读取 CSV 文件。...注意,如果 CSV 文件包含中文的话,还需要指定文件编码。...在做数据分析的时候,此种方法用的比较多,也是一种比较方便地读取 CSV 文件的方法。 我们了解了 CSV 文件的写入和读取方式。这也是一种常用的数据存储方式,需要熟练掌握。

    7.9K20

    如何安全存储秘密?

    一、我是新手我怕谁 新手程序猿通常会直接存储明文密码在数据库中,好一点的会使用MD5来加密密码后存储md5(password),再好一点的会sha1加密密码后存储sha1(password...PBKDF2加密算法就是牺牲了时间来换取安全,一个明文的密码+随机的盐,然后哈希散列加密后存储起来,这是我们前面说的(二、加盐salted)。把这个过程重复100次,得到的结果存储起来。...但是,scrypt在算法层面只要没有破绽,它的安全性应该高于PBKDF2。 五、请使用bcrypt!请使用bcrypt!请使用bcrypt!...bcrypt在默认情况下,在删除数据之前将使用随机数据三次覆盖原始输入文件,以阻挠可能会获得数据的人恢复数据的尝试。...bcrypt经过了很多安全专家的仔细分析,使用在以安全著称的OpenBSD中,一般认为它比PBKDF2更能承受随着计算能力加强而带来的风险。

    3.3K70

    「存储架构」块存储、文件存储和对象存储(第1节)

    文件、块和对象存储之间的区别 文件存储和块存储是在NAS和SAN存储系统上存储数据的方法。 在NAS系统上,它将其存储作为网络文件系统公开。...当设备附加到NAS(网络附加存储)系统时,将显示一个挂载文件系统,用户可以使用适当的访问权限访问其文件。因为NAS系统必须管理用户权限、文件锁定和其他安全措施,以便多个用户可以访问文件。...与任何服务器或存储解决方案一样,文件系统负责在NAS中定位文件。这对于数十万甚至数百万的文件非常有效,但对于数十亿的文件就不行了。...块存储的工作方式与此类似,但与在文件级管理数据的文件存储不同,数据存储在数据块中。几个块(例如在SAN系统中)构建一个文件。...对象存储系统中的许多对象都存储在给定的存储磁盘上。在纯形式的对象存储中,“只能”保存一个文件(对象)的一个版本。如果用户进行了更改,相同文件的另一个版本将存储为新对象。

    7.9K25

    玩转云文件存储

    导语 腾讯云文件存储 CFS 终于可算发布了。在这之前我们已经有了本地硬盘、云硬盘、SSD 硬盘、对象 存储(COS)、归档存储等这么多种存储产品,为什么还需要一种新的产品呢?...这样经常遇到的一个困扰就是各台服务器之间的缓存目录无法共享缓存的文件,因此不得不每台服务器都各自回源一次,又浪费数据源的带宽、给数据源增加不必要的访问压力,还浪费存储。...过往这类问题都要通过比较复杂的方式来尽量解决,比如用inotify触发rsync进行文件同步(别忘了删除文件也要同步),或者采用远程附件形式把文件FTP上传到COS等(目前的COS不支持直接FTP,因此还需要在本地搭建一个...在以往,为了实现集群中的一组服务器上的登录状态共享,经常需要修改默认的会话逻辑,比如另外搭建或者采购一个memcache/redis等缓存服务来存储会话,或者干脆用数据库来存储会话。...这样不但麻烦,而且为了避免这个存储会话的服务成为新的系统单点往往还要做更多的保障工作,比如做主从设计等等。

    15.1K40
    领券