出于对Linux上一些流行文件系统提供的最大文件大小限制()的好奇,我看到一些文件系统达到了TB级。
我的问题是,如果文件指针是32位宽的,就像我们今天遇到的大多数Linux一样,这不意味着我们可以寻址的最大距离是2^32-1字节吗?那么如何存储大于4GB的文件呢?
此外,即使我们可以存储这样的文件,我们如何找到一个位置超过2^32范围?
发布于 2011-02-08 13:30:29
要使用大于4GB的文件,需要Linux上的“大型文件支持”(LFS)。LFS引入的更改之一是文件偏移量为64位数。这与Linux本身是在32位模式还是在64位模式下运行无关(例如,x86对x86-64)。参见例如lfs.html
LFS主要是在glibc 2.2和内核2.4.0中引入的(大致在2000-2001年),所以最近的任何Linux发行版都会使用它。
要在Linux上使用它,可以使用特殊的函数(例如lseek64而不是lseek),也可以设置#define _FILE_OFFSET_BITS 64,然后常规函数将使用64位偏移量。
发布于 2011-02-08 13:30:41
至少在Linux中,编写程序来显式地处理更大的文件是很简单的(也就是说,不只是使用kohlehydrat建议的流方法)。
例如,请参见此页。这个技巧通常归结为在包含一些系统头之前有一个神奇的#define,它“打开”“大型文件支持”。这通常会使文件偏移类型的大小翻倍到64位,这是相当多的。
发布于 2011-02-08 13:47:03
根本没有任何关系。来自C stdio的FILE *指针是一个不透明的句柄,与磁盘上文件的大小无关,它所指向的内存也可能比指针本身大得多。函数fseek(),为了重新定位我们读取和写入的位置,已经使用了一个long,fgetpos()和fsetpos()使用了一个不透明的fpos_t。
在各种系统调用中,使用off_t作为偏移量是很难处理大文件的。幸运的是,人们意识到这将是一个问题,并提出了“大型文件支持”(Large,LFS),这是对偏移类型off_t具有更宽宽度的修改后的ABI。(通常情况下,这是通过引入一个新API来完成的,并通过#define调用旧名称来调用这个新API。)
https://stackoverflow.com/questions/4933561
复制相似问题