- 综合排序
- 最热优先
- 最新优先
知识地图--块存储
学习分布式存储系统中的 块存储（Block Storage）， 是进入云原生、分布式数据库、虚拟化存储领域的关键一环，但是掌握块存储需要什么技能，该怎么学习呢？ 计算机组成原理与存储设备 磁盘、SSD、NVMe、NVDIMM 等存储介质的原理、性能特征 顺序读写 vs 随机读写 DMA、PCIe、cache line、TLB 3. IO 请求路径与调度 BIO 层、request queue、blk-mq 多队列 IO 框架（blk-mq + NVMe） IO 合并、IO 电梯算法 3. 分布式块存储系统架构 核心组成：Client、Metadata Server、Storage Node 数据路径：读写流程、负载均衡、失败恢复 元数据存储与定位：RADOS/Ceph、TiKV、etcd IO 性能评测工具 fio、ioping、perf、iostat QPS、IOPS、延迟（p50/p95/p99）、带宽 3.
34610编辑于 2025-07-02- 来自专栏玖叁叁
文件存储、块存储、对象存储区别（一）
在计算机系统中，存储是指将数据保存在持久化介质上，以便以后访问和使用。不同类型的应用程序可能需要不同类型的存储，以满足其特定的需求。 文件存储文件存储是一种基于文件系统的存储方式，将数据保存在文件中，这些文件可以被多个应用程序并发地访问。 这种存储方式通常用于需要读取和写入整个文件的应用程序，如文档管理、图片、视频、音乐等文件存储和共享等应用。文件存储通常由一个共享存储设备提供，多个计算机可以通过网络访问该设备中的文件。 其中，共享存储设备可以是NAS（网络附加存储器），它是一种基于文件共享的存储设备，也可以是SAN（存储区域网络），它是一种基于块的存储设备。 存储提供者是一个NAS设备，使用“nfs-storage”存储类提供文件共享服务。
7.9K20编辑于 2023-05-03 - 来自专栏DevOps
块存储，文件存储及对象存储 比较
块存储接口的操作对象是二进制数据，物理存储位置是硬盘 （通过逻辑目录 找到对应分区，然后找到对应存储块存储。） 3. 写入数据的时候，由于是多块磁盘组合出来的逻辑盘，所以几块磁盘可以并行写入的，提升了读写效率。 3. 主机之间的数据无法共享，在服务器不做集群的情况下，块存储裸盘映射给主机，再格式化使用后，对于主机来说相当于本地盘，那么主机A的本地盘根本不能给主机B去使用，无法共享数据。 3. 操作对象是目录和文件，物理存储位置 是由 文件服务器对应的文件系统来决定的（比块存储多一个过程:判断参数文件 应该存储到哪个逻辑目录上。） 3. 对象存储接口的操作对象是对象，存储位置是大型分布式服务器. 3.
5.4K11编辑于 2024-03-29 - 来自专栏玖叁叁
文件存储、块存储、对象存储区别（二）
块存储块存储是一种基于块的存储方式，将数据保存在块设备上，块设备通常是一种硬件设备，例如硬盘、固态硬盘或闪存驱动器。 块存储通常由一个存储阵列提供，可以被多个计算机使用，每个计算机都可以访问阵列中的块存储设备，并在其上创建文件系统。块存储通常用于需要随机读写的应用程序，例如数据库、虚拟化、高性能计算等应用。 在块存储中，数据是以块的形式传输，并且每个块可以被独立地访问和管理。 块存储通常使用iSCSI（Internet Small Computer System Interface）协议将块设备连接到计算机系统。 存储提供者是一个iSCSI存储设备，使用“iscsi-storage”存储类提供块存储服务。
7.3K10编辑于 2023-05-03 - 来自专栏玖叁叁
文件存储、块存储、对象存储区别（三）
对象存储对象存储是一种分布式存储方式，将数据保存在对象中，每个对象都有唯一的标识符，可以通过该标识符访问对象。 对象存储通常用于需要海量存储的应用程序，例如大数据、人工智能、物联网等应用。对象存储通常由一个对象存储集群提供，该集群由多个存储节点组成，可以水平扩展以增加存储容量和吞吐量。 下面是一个使用Amazon S3提供对象存储的示例：apiVersion: v1kind: Podmetadata: name: example-podspec: containers: - example-pvcspec: accessModes: - ReadWriteOnce resources: requests: storage: 10Gi storageClassName: s3- 存储提供者是Amazon S3存储服务，使用“s3-storage”存储类提供对象存储服务。
7.2K10编辑于 2023-05-03 - 来自专栏大话存储
选存储，就选原生块存储！
3）应提供丰富的企业级存储服务功能，例如，快照/克隆技术提供快速数据恢复、以及多用途数据副本等能力；在线迁移能够根据实际需求为业务系统调整存储资源配置；QoS功能在多业务系统复杂环境下充分保证关键业务系统的存储性能供给 ZettaStor和原生块存储 作为原AWS核心架构师、S3、Glacier存储项目团队负责人，陈靓先生非常了解对象存储应对块数据需求的不足。 它是以裸设备方式直接管理底层硬盘，并整合成为块存储资源供上层应用来访问使用，由于并不存在对象存储的中间转换过程，因此能够实现低延迟的高I/O访问效率。 ? 对于原生块存储、非原生块存储，测试和验证将是一个非常重要的方法。但是在测试过程中，也应该结合实际，谨防被一些“猫腻”手段所蒙蔽。 以3副本9个节点为例，通常会配置3个容错域A\B\C、每个容错域各3个节点，每个容错域保存独立的副本数据。
2.1K20发布于 2019-06-10 - 来自专栏超级架构师
「存储架构」块存储、文件存储和对象存储(第1节)
此外，大部分存储需求将由企业内部处理，也可以通过Amazon的S3或Microsoft Azure等云服务处理。 带有文件存储和块存储的旧的存储概念将不适用于未来的数据增长，对企业和云提供商都是如此。 文件、块和对象存储之间的区别 文件存储和块存储是在NAS和SAN存储系统上存储数据的方法。 在NAS系统上，它将其存储作为网络文件系统公开。 块存储的工作方式与此类似，但与在文件级管理数据的文件存储不同，数据存储在数据块中。几个块(例如在SAN系统中)构建一个文件。 一个块由一个地址组成，如果SAN应用程序对这个地址发出scsi请求，那么它将获得这个块。存储应用程序然后决定数据块是否存储在系统中，以及存储在什么特定的磁盘或存储介质上。 最后如何组合这些块以及如何访问它们决定了存储应用程序。SAN中的块没有与存储系统或应用程序相关的元数据。换句话说:块是没有描述、关联和存储解决方案所有者的数据段。一切都由SAN软件处理和控制。
7.2K25发布于 2019-12-10 - 来自专栏k3s社区
使用容器化块存储OpenEBS在K3s中实现持久化存储
项目，可以为Kubernetes中部署的工作负载提供持久性块存储。 除了Jiva和Local PV之外，cStor也是OpenEBS提供的存储引擎之一。 磁盘或块设备由称为节点磁盘管理器（简称为NDM）的组件管理。将磁盘连接到agent计算机后，通过执行以下命令来检查块设备。 Unclaimed Active 1h 在本例中，每个K3s agent计算机上都已连接1个块设备。 创建PVC时必须使用此类存储。
2.8K20发布于 2020-05-26 - 来自专栏分布式存储
ceph 分布式存储-块存储(RBD)搭建
管理存储池 1.1 创建存储池 PG数量的预估 集群中单个池的PG数计算公式如下：PG 总数 = (OSD 数 * 100) / 最大副本数 / 池数 (结果必须舍入到最接近2的N次幂的值) #ceph $ ceph osd lspools 1 rbd,2 test_data,3 test_metadata,5 test,6 benmark_test,7 .rgw.root,8 default.rgw.control 管理块设备镜像 2.1 创建块设备镜像 #rbd create --size {megabytes} {pool-name}/{image-name}，如果pool_name不指定，则默认的pool是rbd 下面的命令将创建一个10GB大小的块设备： $ rbd create --size 10240 test_image -p test_pool 2.2 删除块设备镜像 #rbd rm {pool-name # sudo mkfs.xfs -f /dev/nbd0 3.
4.6K20发布于 2020-07-20 - 来自专栏云计算运维
认识存储：块、文件和对象
块存储是数据存储的最古老形式，数据都存储在固定长度的块或多个块中。块存储适用于企业存储环境，并且通常使用光纤通道或 iSCSI 接口。 根据 SUSE 的软件定义存储高级产品经理 Larry Morris 的说法，“块存储要求一个应用去映射存储设备上存储数据块的位置。” Jean 说“块存储将单个的存储卷（如一个虚拟或云存储节点、或一个老式硬盘）分割成单独的被称为块的实体。” 每个块独立存在，并且能够用它自己的数据传输协议和操作系统格式化 —— 给用户完全的配置自主权。由于块存储系统并不负责像文件存储系统那样的文件查找职责，所以，块存储是一个非常快的存储系统。 由于同时具备速度和配置灵活性，使得块存储非常适合原始服务器存储或富媒体数据库。 块存储适合于宿主机操作系统、应用程序、数据库、完整虚拟机和容器。
2.2K10发布于 2021-10-18 - 来自专栏安全乐观主义
浅谈块存储的安全配置
介绍 我们已经多次关注亚马逊S3、阿里云oss这类对象存储的安全性问题，比如Bucket的权限管理，上传文件的xss问题、AK\SK的保护。 如果说对象存储Object Storage Service像云盘，而本文所说的块存储Block Storage是类似于机械硬盘、固态硬盘的“云硬盘”。 亚马逊方面在Elastic Compute Cloud (EC2)的实例的持久块存储称为Elastic Block Storage。 在设计之初，主要关注的安全特性为： 存储空间由很多chunk（数据块）组成，分布式存储的方式使得某处chunk被窃取，也不会发生数据安全问题； 底层数据每个chunk通过三副本存储在集群中的不同节点上， ，而阿里云类似的共享块存储功能仍处于内部测试中，但是可以翻看API手册方便预测此类安全威胁。
4K30发布于 2019-11-20 - 来自专栏执笔绘倾城
3、块存储、网络文件系统、分布式存储、的原理分别是什么
块存储原理：主要是将裸磁盘空间整个映射给主机使用的，就是说例如磁盘阵列里面有5块硬盘（为方便说明，假设每个硬盘1G），然后可以通过划逻辑盘、做Raid、或者LVM（逻辑卷）等种种方式逻辑划分出N个逻辑的硬盘 简单地说，iSCSI就是在IP网络上运行SCSI协议的一种网络存储技术。为了克服上述文件无法共享的问题，所以有了网络文件系统。 分布式存储系统，是将数据分散存储在多台独立的设备上。 传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性能的瓶颈，也是可靠性和安全性的焦点，不能满足大规模存储应用的需要。 分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用元数据服务器定位存储信息，它不但提高了系统的可靠性、可用性和存取效率，还易于扩展。[1]
1.6K40编辑于 2022-10-06 - 来自专栏分布式存储
ceph分布式存储-块存储BlueStore性能测试
,_(1),r(3),_(1),r(2),_(1),r(1),_(1),r(1),_(1),r(1),_(2),r(5),_(1),r(3),_(2)] [96.4% done] [1312MB/0KB byte，默认 4M--io-threads：线程数，默认 16--io-total：总写入字节，默认 1024M--io-pattern <seq,rand>：写模式，默认为 seq 即顺序写 只能对块设备做写测试 可以对使用内核内 rbd 和用户空间 librados 进行比较3. 标准规则 - 顺序和随机 IO4. 块大小 - 4k，16k，64k，256k5. 模式 - 读和写6. 支持混合模式 3.2 测试结果比较 3.2.1 rados bench测试结果 客户端数 并发数 块大小 写测试 顺序读 随机读 单个客户端 30 4M 带宽：1119.68 MB/s 平均IOPS： 带宽：2238.71MB/s 平均IOPS：558 平均耗时：0.212s 带宽：2237.01MB/s 平均IOPS：558 平均耗时：0.212s 3.2.2 rbd测试结果 客户端数 并发数 块大小
10.7K20发布于 2020-07-20 - 来自专栏charlieroro
基于华为fusionstorage的块存储CSI
承接上文，块存储的CSI要比对象存储复杂一些，但总的处理逻辑还是一致的。 下面以华为fusionstorage的CSI为例进行介绍，该插件支持了多个后端存储，如fusionstorage和oceanstor。 下面是CSI插件与后端存储(fusionstorage)交互用到的配置文件。 其中pools为事先创建好的存储池，parameters为所有k8s的node节点的hostname:ip对，用于执行attach块存储操作。 整体挂载流程为：在后端存储创建一个卷(如果不存在)，并将其attach到node节点的/dev目录下；由于容器挂载了/dev目录，在容器中直接格式化该块存储并挂载到/var/lib/kubelet中的pod
2.3K10发布于 2020-04-08 - 来自专栏reizhi
Hetzner Storage Box 存储块性能测试
Box 存储块服务的价格，目前 1TB 基础款售价仅为 2.9 欧元，性价比极为突出。 相比之下老司机最喜欢的 Buyvm 1TB 存储块按照支付宝加元结算也需要 3.45 欧元，且必须配合 Buyvm 自家 VPS 才能够使用。 Hetzner 的存储块服务目前支持以 FTP，SCP，Samba，rsync，WebDAV 等协议对接，但略显遗憾的是不支持 Amazon S3 。 4.全球下载测试 通过 https 协议下载存储块中的文件（单线程，200M） 地区 速度（MB/s） 荷兰 Alwyzon 12.8 德国 Webhosting24 52.7 英国 Bluevps 22.3 5.总结 除了极高的性价比之外，Hetzner Storage Box 存储块服务在欧洲地区也表现出了非常不错的可用性，其读写性能足以满足备份和冷数据存储的需要。
3.6K10编辑于 2022-09-26 - 来自专栏yuezhimi
ceph-块存储客户端
ceph块存储 ceph块设备，以前称为RADOS块设备，为客户机提供可靠性、分布式和高性能的块存储磁盘。RADOS块设备利用librbd库并以顺序的形式在ceph集群的多个osd上存储数据块。 安装ceph块存储客户端 创建ceph块客户端用户名和认证密钥 [ceph-admin@ceph-node1 my-cluster]$ ceph auth get-or-create client.rbd cluster: id: cde2c9f7-009e-4bb4-a206-95afa4c43495 health: HEALTH_OK services: mon: 3 daemons, quorum ceph-node1,ceph-node2,ceph-node3 mgr: ceph-node1(active), standbys: ceph-node2, ceph-node3 镜像时之启用分层特性 [root@localhost ceph]# rbd create rbd2 --size 10240 --image-feature layering --name client.rbd 3）
3.6K30发布于 2020-09-30 - 来自专栏腾讯架构师的专栏
腾讯云弹性块存储技术解密
[1501466823180_1478_1501466824713.jpg] 作者介绍：Yh， 2010年加入腾讯，有12年的存储经验，在弹性块存储技术方面经验丰富，本文将其在TEG TALK上的分享内容进行整理 如何实现云硬盘（弹性块存储）系统？ CBS云硬盘起初是依赖腾讯已有的3个分布式系统：TFS提供冷数据存储、TSSD提供热数据存储和CKV提供分布式锁，用这三个分布式系统做简化整合从而产生了CBS 存储后台。 其实最开始CBS是将这3个分布式存储系统拼凑在一起，并在前端封装一个iSCSI的块存储服务，这就是CBS1.0。 当然ceph也有很多值得我们借鉴的东西：例如CBS是块存储平台（目前已经支持文件存储），而ceph一开始就是作为统一存储平台设计的，同时支持块存储、文件存储和对象存储；CBS的是镜像多副本存储，但是ceph
15.3K32发布于 2017-07-31 - 来自专栏开源部署
我看Openstack的临时(Ephemeral)存储和块(Block)存储
背景 Openstack不管是Ephemeral Storage还是Block Storage, 其实从接口上看，其实都是块服务。 那么为什么要搞两个不同的类型呢，本文从这两种不同类型块存储的实现上来分析下其中的原因。 临时存储 Openstack临时存储是由Nova提供的，主要是利用主机的本地存储给虚拟机提供卷服务。 块存储 目前Openstack的块存储由Cinder提供，其后端支持很多类型的存储设备，比如多个厂商不同型号的阵列设备，或者是Ceph, Glusterfs, Sheepdog之类的分布式存储系统。 基于块存储，可以为用户提供： 高可靠的存储（基于阵列的RAID, 或者是分布式存储的多副本机制；甚至还可以充分利用设备的备份，远程复制能力） 共享存储 （意味着可以支持HA, 虚拟机迁移等等） 临时存储的妙用 ，起码要3个副本，再考虑到定期备份，快照，跨地域容灾，成本一样很高。
2.2K10编辑于 2022-06-30 - 来自专栏哎_小羊
初试 Ceph 存储之块设备、文件系统、对象存储
目录 Ceph 存储介绍 环境、软件准备 Ceph 块设备 Ceph 文件系统 Ceph 对象存储 1、Ceph 存储介绍 Ceph 是一个开源的分布式存储系统，包括对象存储、块设备、文件系统。 同时该模块通过 LIBRADOS 的公共库对外提供存储服务，如对象存储、块设备存储。 通过官网文档 Ceph 体系结构 中的图片可以很清楚的了解 Ceph 存储体系。这里就不一一阐述各个组件了。 ? 2、环境、软件准备 要使用 Ceph 存储体系中的块设备、文件系统以及对象存储，必须保证已完成 Ceph 存储集群的搭建，并且保证 Ceph 存储集群处于 active + clean 状态。 3、Ceph 块设备 Ceph 块设备也可以简称为 RBD 或 RADOS 块设备，不过我们还是习惯叫 RBD，官网文档中指出不能在与 Ceph 存储集群（除非它们也用 VM ）相同的物理节点上执行使用 3、创建文件系统，将 foo image 格式化为 ext4 格式的文件系统，就可以使用块设备了。
7.3K90发布于 2018-01-02 - 来自专栏监控
开源云原生存储rook：块存储快速入门实战
Block Devices（块存储） 图片 在 Rook 中，块存储有两种存储类型：副本存储和纠删码存储。 「纠删码存储：」 是一种基于纠删码的存储方式，其中数据被编码为多个数据块，并在不同的节点上存储这些数据块的编码片段。在纠删码存储中，数据被编码为多个数据块，并根据指定的参数对这些数据块进行编码。 编码后的数据块被分散存储到不同的节点上，当某个节点出现故障时，系统可以使用存储在其它节点上的数据块编码片段来恢复数据。 这个特定的块存储池名为 replicapool，它使用主机故障域进行故障域分离，使用副本存储策略，并将每个对象的副本数量设置为 3，要求所有副本都必须是安全的。 块存储池是一个逻辑卷，可以在其中创建块设备。删除块存储池将确保不再创建新的块设备。
2.2K00编辑于 2023-04-06
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号