- 综合排序
- 最热优先
- 最新优先
- 来自专栏ADAS性能优化
Fast commits for ext4
ext4 journal 包括了与正在进行的操作相关的 metadata 的改动，但不一定也包括有关的数据改动。mount 选项中可以指定选择三种日志模式中的一种，ext4 内核文档中有详细描述。 data=ordered ，是缺省设置，会要求 ext4 在将相关的 metadata 提交到日志之前先写入所有数据。它不会将数据本身放入日志中。 Ext4 使用了一个名为 "Journaling Block Device 2" (JBD2)的通用日志层（generic journaling layer），具体在磁盘上的存储格式可以从 ext4 wiki 而 ext4 文件系统结构导致的一个副作用，就是所有的文件描述符的所有等待处理的数据和 metadata 都将被 flush 出去。 但无论如何，fast-commit 功能应该会给 ext4 文件系统带来更好的性能。
1.8K10编辑于 2022-12-05 - 来自专栏Linux问题笔记
ext4 io hung模拟脚本
README该脚本利用ext4的日志功能模拟一个io hang的场景在使用该脚本前，请确保：1.机器上有盘是挂载为ext4的，可通过 mount ｜ grep ext4 命令查看确认2.挂载点的ext4 打开了日志功能，可通过 dumpe2fs /dev/vda1（这里是挂载为ext4的盘，上面mount命令可以看到）| grep features | grep has_journal 命令查看确认3. /io_hang_simulator.sh 0 vda1 # 开始io hang功能，第一个参数0表示打开功能，第二个参数为想要模拟io hang的挂载为ext4的盘的名字，比如想要在/dev/vda1 上模拟io hang则输入vda1，如果不输入(或输入一个不存在的盘)，则默认在所有ext4挂载点上模拟到这里就可以开始您的IO表演了，比如：在模拟的盘的挂载点上随便后台cp或者修改什么文件然后执行sync io_hang_simulator.sh 0/1 vda1# 第一个参数是0表示打开功能# 第一个参数是1表示关闭功能# 第二个参数是盘的名字，dev目录下的xxx，如vda1或vdb1# 第二个参数如果不输入，默认是所有挂载为ext4
1.5K10编辑于 2022-10-31 - 来自专栏python3
EXT3与EXT4
EXT4 http://zh.wikipedia.org/zh-cn/Ext4 ext4（第四扩展文件系统）文件系统是Linux系统下的日志文件系统，是ext3文件系统的后继版本。 向下兼容 ext4向下兼容于ext3与ext2，因此可以将ext3和ext2的文件系统挂载为ext4分区区。 由于某些ext4的新功能可以直接运用在ext3和ext2上，直接挂载即可提升少许性能。 ext3文件系统可以部分向上兼容于ext4（也就是说ext4文件系统可以被挂载为ext3分区区）。 然而若是使用到Extent技术的ext4将无法被挂载为ext3。 预留空间 ext4允许对一文件预先保留磁盘空间。 即使Ext4包含有许多避免磁盘碎片的技术，但是磁盘碎片还是难免会在一个长时间使用过的文件系统中存在。Ext4将会有一个具有磁盘整理功能的工具[6]。
2.9K20发布于 2020-01-06 - 来自专栏Postgresql源码分析
innodb与ext4缓存交互分析
innodb与ext4缓存交互分析 一般来说对一个文件的写入操作包括两部分，对数据本身的写入操作，以及对文件属性（metadata元数据）的写入操作(这里的文件属性包括目录，inode等)。 3 ext4挂盘参数优化 noatime 读操作的atime时间值不会记录到inode中，能减轻读操作对磁盘的频繁写入 nodiratime 此选项只针对目录禁止进行atime更新，这样就可以使 ls这样的命令不会更新目录的atime值 nodelalloc 禁用延迟分配，块号会在page cache的时候分配，提前分配好block是ext4的特性，大文件可加快速度 nobarrier data=ordered ext4 支持根据用户需求采用多种模式的日志记录。 ext4 支持 Writeback 模式，它仅记录元数据；或 Ordered 模式，它记录元数据，但写为元数据的数据是从日志中写入的；或 Journal 模式（最可靠的模式），它同时记录元数据和数据。
1.5K40编辑于 2022-05-12 - 来自专栏idba
xfs vs ext4 性能压测对比
的性能对比 select 性能 蓝色线是xfs ，黄色线是ext4 ? insert/delete 黄色线 为xfs ，蓝色线是ext4 ? update 绿色线 为xfs ，蓝色线是ext4 ? io 利用率 ext4的io利用率比xfs 的高。 ? cpu 绿色线 为xfs ，黄色线是ext4 ，xfs的cpu利用率略高。 ? 3.3 结论 高并发压力下 xfs 的性能比 ext4 高 5-10% 左右。 对应的io利用率 xfs 明显比ext4低,但是cpu 比较高 如果qps tps 在5000以下 etf4 和xfs系统无明显差异。 压测过程中 xfs 在高并发 72个并发情况下出现thread_running 抖动，而ext4 表现比较稳定。
49.2K2526发布于 2019-07-10 - 来自专栏腾讯数据库技术
一个ext4的Bug分析过程
看到这里，您也许会有疑问，我知道ext4中有一个extent tree来组织磁盘块，那么extent status tree是一个什么结构呢？ extent status tree其实最初是为了优化延迟分配(delalloc)而引入的，所以有必要简要介绍一下ext4的延迟分配机制。 2.1 ext4延迟分配机制 ext4的延迟分配机制是将以前ext3中buffer I/O每次写操作涉及的磁盘块分配过程推迟到数据回写时进行，这一特性在其他文件系统例如XFS、ZFS和btrfs中也有。 总结 本文通过对Linux ext4文件系统的一个bug进行分析，探讨了ext4的延迟分配机制、块查找过程及extent cache收缩机制，并简要介绍了社区对这一个bug的修复方案。 参考文献 ext4 extent tree LRU locking #1 ext4 extent tree LRU locking #2 ext4延迟分配 Linux删除文件过程解析 extent status
4.4K20发布于 2018-06-05 - 来自专栏KAAAsS's Blog
Btrfs：认识、从Ext4迁移与快照方案
文章目录[隐藏] Btrfs：现代Linux文件系统 概述 子卷和快照 从Ext4迁移 子卷规划 迁移 系统快照方案 需求 各种方案们 Ubuntu风格：Timeshift方案（推荐） 配置流程 Troubleshooting 相较之下，类似的ZFS有License问题；潜力十足的ReiserFS因为作者谋杀入狱后开发进度就不太乐观，且v4也没被合入内核；XFS走的是类似Ext4的稳定路线，对新功能的支持较为保守（但是足够稳定 不过Btrfs的缺点也很明显：数据恢复难度显著大于Ext4等传统FS、稳定性一般、读写速度也相对较差（主要是HDD，SSD基本没有问题）。 从Ext4迁移 子卷规划 了解了Btrfs之后，就可以考虑如何规划子卷了。区分不同子卷的主要目的是为Btrfs提供的大量功能划定作用的粒度。 此外，我也不建议通过迁移工具来直接把ext4分区转为btrfs分区，因为至少在本文写作时还有见到迁移后使用不稳定的报告。
6.6K30编辑于 2022-01-31 - 来自专栏存储内核技术交流
聊聊ext4文件create和truncat实现
ext4_group_desc struct ext4_group_desc inode struct ext4_inode_info struct ext4_inode 文件create实现分析 在ext4 下面整体展示了ext4文件系统的磁盘布局和inode在磁盘存储的数据. ext4 文件创建可以分为inode申请->在父目录中添加目录项这总体2步。 如下是ext4文件系统posix语义实现的函数定义 // inode操作函数表定义 const struct inode_operations ext4_dir_inode_operations = { quota_write, .get_dquots = ext4_get_dquots, #endif .bdev_try_to_free_page = bdev_try_to_free_page, }; 下面是ext4 -ENOSPC && ext4_should_retry_alloc(dir->i_sb, &retries)) goto retry; return err; } 文件runcate实现分析 ext4
1.5K40编辑于 2022-08-17 - 来自专栏云原生实验室
由 OOM 引发的 ext4 文件系统卡死
此时，系统无法进行账号登录，似乎整个根文件系统（ext4）都卡住了。 但是，为什么 OOM 会导致 ext4 文件系统卡死呢？ 相关问题检索 从日志和采集到的 vmcore 中，发现有许多进程都卡在 ext4/jbd2 的 I/O 操作上。 内，也可能不处于 cgroup 中）ext4 I/O 操作无法进行。 每一个 ext4 文件系统实例对应一个 jbd2 Journal 实例。 [ext4] #9 [ffff9f53c234fb70] __ext4_new_inode at ffffffffc03d271b [ext4] #10 [ffff9f53c234fc18] ext4
5.6K21发布于 2021-01-29 - 来自专栏巫山跬步
云盘文件系统比较：Ext4、XFS和Btrfs
Ext4 Ext4（ext4日志文件系统、第四代扩展文件系统）文件系统是Linux用途最广泛的日志文件系统。Ext4稳定版本发布于2008年，即Linux 2.6.28版本。 但它的历史最早可以追溯到1992年的Ext2文件系统，那是Linux最早使用的文件系统，而后2001年出现的Ext3在Ext2基础上增加了日志功能，并最终由Ext4替代，而且Ext4可向前兼容Ext2/ Ext4在Ext3的基础上，又增加了不少新特性。第一，大文件支持，最大卷1EiB，最大文件16TiB（对于4KiB块）。Ext4中实现了基于extent的数据管理。 通过df命令看出，其inode初始值就是ext4的10倍左右。 xfsinode.PNG 另外，XFS可以更高效支持并行IO操作，RAID上的扩展性更好，多线程并行读写时相比Ext4有优势。 差不多，相比Ext4稍有优势。
15.3K3614发布于 2021-01-03 - 来自专栏数据库相关
ZFS文件系统和ext4空间占比
以graphite的carbon文件夹为例， 在 ext4文件系统上，占用空间大约是 83GB 。 scp到 zfs文件系统上，看到大约只占了15GB ? ?
2.3K20发布于 2020-03-20 - 来自专栏北京马哥教育
Ext3 和 ext4 文件系统在线调整大小内幕
磁盘布局 为了更好的理解在线调整大小工作机制，我们首先需要理解 ext3 和 ext4 文件系统的磁盘布局，对于该功能的实现来说，这两个文件系统在磁盘上的结构是一致的，同时为了简化和突出重点，对于与在线调整大小功能不相关的内容我们将不会介绍 每个块组都包含一些重要的元数据信息，见图1： 图1 Ext3和Ext4文件系统磁盘布局 ? 见图3 图3 当前Ext3和Ext4文件系统通过预留块来解决online resizing的问题 ? 元块组的概念其实很早就出现在内核中了，但是直到linux 2.6.21内核Ext3和Ext4文件系统online resizing功能并未支持这种新的布局，在Ext4的实现计划中将进行支持。 它的出现使得Ext3和Ext4的磁盘布局有了一定的变化，以往超级块后紧跟的是变长的GDT块，现在超级块(决定于是否是3,5,7的幂)和一个组描述符块存储在元块组的第一个，第二个和最后一个块组的开始处(见图
2.7K60发布于 2018-05-02 - 来自专栏存储内核技术交流
探究ext4文件系统中的rename
过程的日志，然后删除new_name对应inode和old_name对用的dentry.接着更新new_name对应的dentry中的inode为old_name的inode 分析 // 这里分析的是ext4 , new_dentry, is_dir); else error = may_delete(new_dir, new_dentry, new_is_dir); } // 最后调用具体ext4
1.3K10编辑于 2022-08-17 - 来自专栏linux 自动化运维
linuxwindows 磁盘分区扩容：ext4 xfs NTFS 磁盘扩容
# 相关链接linux/windows 磁盘分区扩容：ext4 xfs NTFS 磁盘扩容: http://ddoss.cn/read-581-1.htmlparted 磁盘分区-挂载-删除-shell
1.6K10编辑于 2025-01-06 - 来自专栏存储内核技术交流
浅谈ext4文件系统初始化
[ext4]() { ext4_get_group_desc [ext4](); ext4_journal_check_start [ext4](); ext4_inode_table [ext4](); ext4_group_desc_csum_set [ext4]() { ext4_group_desc_csum [ext4](); } } ext4 _get_group_desc [ext4](); ext4_init_inode_table [ext4]() { ext4_get_group_desc [ext4](); ext4 _journal_check_start [ext4](); ext4_inode_table [ext4](); ext4_group_desc_csum_set [ext4]() { [ext4](); ext4_group_desc_csum_set [ext4]() { ext4_group_desc_csum [ext4](); } } ext4
2K20编辑于 2022-08-17 - 来自专栏LINUX阅码场
大话EXT4文件系统完整版
本系列文章将以Linux系统最常见的EXT4文件系统为例，从SSD爱好者的角度来揭开文件系统的庐山真面目。 租好了房之后，他听说著名的”饿想她”超市在附近新开了第四家分店，叫做EXT4，蛋蛋决定去买些吃的回来。 引用 https://ext4.wiki.kernel.org/index.php/Ext4_Disk_Layout 三：超市货架的秘密 上回说到，蛋蛋来到饿想她超市第四家分店EXT4，发现每个货架Block 但是，后来超市创始老板退休，少老板接班，新官上任三把火，决定建设一个更厉害的第四家分店ext4。 本文介绍文件系统EXT4（不是EXO）的掉电恢复利器日志（Journal）。 如果你看了公众号前面文件系统的文章，就知道最核心的数据是lnode，文件系统的映射表，记录了每个文件数据块的地址。
6.3K30发布于 2019-12-10 - 来自专栏存储内核技术交流
从磁盘存储维度观测ext4文件系统
// 创建空文件 $ touch /mnt/ext4/a.txt // Blocks是磁盘扇区的大小，IO Block是操作系统每次IO的大小(4K)，明显占用扇区的大小为0 $ stat /mnt/ext4 /a.txt // 这里看到ext4文件系统分配了8个扇区,每个扇区大小是512个字节，所以8个扇区大小就是IO Block大小 $ stat /mnt/ext4/a.txt File: /mnt $ filefrag -v /mnt/ext4/a.txt Filesystem type is: ef53 File size of /mnt/ext4/a.txt is 5 (1 block of $ stat /mnt/ext4/a.txt File: /mnt/ext4/a.txt Size: 5 Blocks: 8 IO Block: /a.txt $ touch /mnt/ext4/b.ext $ stat /mnt/ext4/b.ext File: /mnt/ext4/b.ext Size: 0
1.5K20编辑于 2023-02-26 - 来自专栏Tech Explorer
借助 ext4 文件系统的 打洞 功能实现消息队列
借助 ext4 文件系统的 打洞 功能，可以实现一个消息队列 https://gist.github.com/CAFxX/571a1558db9a7b393579 1 fallocate(fd, FALLOC_FL_PUNCH_HOLE 如果用 3.15 之后的 linux kernel ，在 ext4 (only for extent-based files) 和 XFS 文件系统上， http://man7.org/linux/man-pages
1.2K20发布于 2021-06-25 - 来自专栏分布式存储
Ext4 文件系统中大型目录结构的最佳实践
File Systems 在 Ext4 文件系统中实现高效 inode 管理的策略Implementing Directory Indexing Techniques in Ext4 for Improved Performance 在 Ext4 中实施目录索引技术以提高性能Best Practices for Large Directory Structures in Ext4 File Systems in Ext4 File Systems 优化 Ext4 文件系统中大型目录的空间利用率In the realm of file systems, Ext4 stands out as a robust 但是，在 Ext4 中有效地管理大型目录需要对其底层结构和功能有细致的了解。本文深入探讨了在 Ext4 文件系统中优化大型目录结构中的空间利用率的最佳实践，以确保高效的性能和管理。 此外，在 Ext4 中分配 inode 大小对于有效管理大型目录也起着关键作用。Ext4 允许在创建文件系统时配置 inode 大小。
41810编辑于 2025-05-27 - 来自专栏人人都是极客
文件系统专栏 | 之ext4文件系统结构
所以，用户的操作通过VFS转到各种文件系统，linux用到最多的是ext4文件系统，我们就说这个吧。 EXT4是第四代扩展文件系统（英语：Fourth extended filesystem，缩写为 ext4）是Linux系统下的日志文件系统，是ext2和ext3文件系统的后继版本。 ext4文件系统布局 一个Ext4文件系统被分成一系列块组。为减少磁盘碎片产生的性能瓶颈，块分配器尽量保持每个文件的数据块都在同一个块组中，从而减少寻道时间。 总结:上面的数据结构都是硬件设备定好的，ext4只是把这些数据结构一个个读出来再分析哪些是目录哪些是文件哪些是文件内容而已。 在ext4文件系统挂载的第一步是读取前512字节的MBR数据结构，确定是ext4格式的，并且分析有几个分区。
4.9K21编辑于 2022-08-29
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号