回答情况：
提问时间：
问题标签：
2回答
我有一个大约在400MB之间的文件。我需要它在大约2500台计算机上可用。这些计算机将在8小时的过程中大致在同一天下载该文件。这意味着它们不会在同一秒内全部访问，而是在8小时内访问。如果不能，您建议使用什么配置来分发这些文件。谢谢!
浏览 2提问于2011-02-17得票数 1
对于这两个运行程序，运行checkout@v2操作会导致某些“大”下载文件变得过大。例如：使用该操作下载后，回购系统中的512 kb png图像变为514 kb，或1331 kb .exe文件变为1355 kb。\premake5.exe vs2019这种情况只发生在一些大型文件中。在操作运行器的克隆操作运行器中运行git status时，“损坏”文件被视为已修改文件。
自托管运行程序
浏览 2修改于2020-09-08得票数 0
回答已采纳
1回答
导入此文件的最佳(最快)方法是什么？innodb_log_file_size = 1Ginnodb_flush_log_at_trx_commit = 0
我使用MySql命令行客户端执行此文件
浏览 2修改于2017-08-26得票数 1
1回答
我现在的管理员文档(log.log)中有一个超过18 is的文件。我似乎无法删除该文件，因为它只是再次出现。任何帮助。
当我删除日志时，它说我没有管理员特权。(我知道)
浏览 0提问于2012-04-25得票数 3
我有一个很大的文件150 GB。我使用只读mmap，并对文件执行二进制搜索。这个优化值得去做吗？
还有如何估计磁盘块“结束”的位置。
浏览 4修改于2016-07-20得票数 4
回答已采纳
我在Linux上有一个63 GB的文件需要删除。我的垃圾现在只有6 GB。我尝试将63 GB的文件拆分成63个1 GB的文件，并且成功了。但是，我拆分的文件仍然存在，所以我仍然无法删除它。我在互联网上搜索，发现解压这些海量文件的方法是首先将它们连接在一起，这就是63 GB的文件。一个我存储了多年照片和视频的网站正在关闭，他们给我发来了这个zip文件，这些文件必须连接在一起才能解压。然后我成功地解压了这些文件，没有问题，并从这个网站获得
浏览 7提问于2014-07-05得票数 2
如果文件大小超过30 to (30000000字节)，我想拒绝上传。此时，拒绝消息可以是任何内容。当前，当将一个大文件放到区域中时，会出现以下错误：
我看到在这个onDropRejected组件中有一个名为Dropzone的属性可以使用，但是我们如何才能使用这个属性而不是像上面那样运行错误呢
浏览 18修改于2022-06-21得票数 0
我有一个很大的XML文件，我有点不知道如何处理它。它有60 GB，我需要读一读。有谁有任何这样做的样本可以给我指给我看？
谢谢
浏览 1提问于2014-01-27得票数 7
我试图对一个包含大约10亿条记录的大型文件进行排序(每个记录包含四个整数)。文件的大小将超过50 up。1)为什么我的代码没有足够的磁盘空间来对6GB文件进行排序？请检查它(只附上几行重要的内容)。
2)我的个人电脑整理2亿条记录的合理时间是5分钟吗？
浏览 2修改于2015-01-18得票数 3
回答已采纳
我有一个未压缩的Wikipedia转储文件，大约75 GB (压缩后:大约16 GB)。我只想要它的一个非常小的子集，并想看看是否有一种方法可以在Jupyter中完成这种过滤，比如大型XML文件。
浏览 0修改于2020-02-11得票数 0
1回答
我需要生成一个XML文件。这在C#中是很简单的.问题(除了缓慢的数据库查询分离问题)是输出文件很容易达到2GB。最重要的是，输出XML并不是一种可以轻松地在SQL中完成的格式。每个父元素在其子元素中聚合元素，并维护跨文件的顺序唯一标识符。我将一个更高级别的元素(比如level2Element)和它的子元素写入输出文件。完成此级别的写作之后，我将移到父组，并使用聚合的数据及其标识符插入标头。有没有人想过如何更好地输出这么大的XML文件？
浏览 1修改于2013-09-25得票数 2
6回答
我的任务相对简单:对于输入文件中的每一行，测试该行是否满足给定的一组条件，如果满足，则将该行的特定列写入一个新文件。1)我使用的文件包含天文图像的光度测量。每个文件大约有1e6行乘以150列的浮点数，大小通常超过1 1GB。我有一个旧的AWK脚本，可以在大约1分钟内处理这样的文件；我的python脚本需要5到7分钟。我经常需要调整过滤条件并重新运行几次，直到输出文件是我想要的，所以速度绝对是我想要的。当一个文件有不同的列时，我只需要指定一个新的字典。也许有更好的方法来做
浏览 0提问于2011-02-26得票数 5
所以我想一片一片地验证一个文件，而不是把它全部装入内存中。我知道我可以使用缓冲器逐个更新签名，但这不是我想要的。我想缓冲部分数据，然后使用签名和证书来验证这部分数据，然后重复，直到整个文件被验证为止--我每次只将少量文件加载到内存中。如果我有一个1GB的文件，我无法有效地将它加载到内存中来签名/验证该文件。
浏览 5修改于2015-06-18得票数 0
回答已采纳
我正在转换10个大的固定宽度文件(平均19 10 )为一个地板。我是通过堆叠固定宽度的文件来做到这一点的。它已经运行了2天，已经产生了2200 151 MB的文件，总计340 MB，而且还在增长。有没有一种方法，我可以在不堆叠的情况下将文件读入dask数据帧，这样会更快吗？还有什么我可以更改以使输出文件更小吗？我的理解是parquets是压缩的，并且应该比.txt文件小。
编辑添加了代码来重现这个问题:这段代码在我的机器上运行了4分钟。它创建的文件“test.csv”为
浏览 1修改于2019-04-24得票数 1
回答已采纳
我有一个很大的xml文件(大约84MB)，格式如下： <book>...</book> <book>...我尝试解析它(就像我对其他xml文件所做的那样)，如下所示：parser我应该指出，该文件可能包含希腊语、西班牙语和阿拉伯语字符。
浏览 0修改于2013-01-04得票数 2
回答已采纳
upload all Parts, parts number=%s, part size=%s", strPartsCount, strPartSize)); 但是我有一个例子，我有一个非常大的文件
浏览 0提问于2018-03-26得票数 0
回答已采纳
但是，在下载完整个文件之后，我们如何在不重新读取整个文件的情况下检查md5呢？response, NSError *error) {}];
这里的关键要求是内存占用少，文件必须完全下载
浏览 4修改于2014-03-30得票数 0
回答已采纳
我试图使用JAVA中的gson库( )解析一些巨大的JSON文件(如)。
将该文件直接用作nonSql数据库，保存该文件并将其用作我的数据库。
浏览 2提问于2012-02-22得票数 61
回答已采纳
我目前正在做一个项目，涉及将一个非常大的文件(大约6 6GB)从一个Linux服务器传输到另一个服务器。服务器运行在Debian Squeeze上。为了实现我的主要目标，我首先将文件的名称和大小发送到目标机器，然后创建一个空文件来存储我逐渐从源机器接收到的数据块。我的问题是在我的服务器上创建一个6 6GB的文件需要花费太长的时间。为了清楚起见，我使用下面的C例程来创建新文件： char* bs,
浏览 1提问于2013-05-27得票数 1
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号