回答情况：
提问时间：
问题标签：
1回答
我正在考虑一种在并行中解析fasta文件的方法。我想您应该将整个文件加载到内存中，但在此之后，我很难找到处理这些数据的方法。当这些行相互依赖时，有人有并行解析文件的经验吗？
浏览 2修改于2011-11-24得票数 3
回答已采纳
3回答
为了下载文件，我创建了一个urlopen对象(urllib2类)并分块读取它。
我想要多次连接到服务器，并在六个不同的会话中下载文件。这样做，下载速度应该会更快。许多下载管理器都有这个功能。我想指定我想在每个会话中下载的文件部分，并以某种方式在同一时间处理所有会话。我不确定我如何才能做到这一点。
浏览 0修改于2012-01-26得票数 6
回答已采纳
2回答
我想发出一个命令，并行地搜索给定数量的文件以获取一个给定的单词，其中.
我想用两种方式来做这件事，一种是用processes，另一种是用threads。
浏览 3修改于2015-11-07得票数 0
我使用的是策略矩阵，所以不同的操作系统作业是并行运行的。 我的目标是将构建文件上传到一个单独的版本标签，其中每个文件都有一个基于操作系统平台的自定义名称。**我已经设法将单个文件上传到ubuntu-latest的单个版本标签。对于windows-latest，我收到一个错误，说没有找到要上载的文件:( . name: CMake
push: pull_request
浏览 28修改于2021-07-08得票数 0
3回答
假设我在外部服务器上有3个文件，每个文件为1GB。为了下载，我会这样做：在并行执行这三个项方面(例如，在三个单独的选项卡/shell/线程中)，或者以串联方式执行，例如：&& wget https://server.com/file3.mov \
我有一个非常快的本地下载连接，而且服务器的速度要
浏览 3修改于2021-03-01得票数 2
回答已采纳
5回答
我有一个在Linux系统上复制的文件列表--每个文件的大小从10到100 in不等。
我只想复制到本地文件系统。是否有一种方法可以以一种简单的方式并行地执行--每个进程负责复制一个文件？
浏览 0提问于2010-06-18得票数 11
由于时间限制，我开发了一个web应用程序，其中许多特定于语言的字符串被直接硬编码成大型/Javascript静态文件。由于编码不好，代码和内容没有正确地分开。为了实现快速和脏的本地化，我正在寻找某种类型的文本编辑器，它允许“标记”文件的本地元素并将它们转换为“自定义字段”。然后，这些字段可以存储在某个资源文件中，并独立于共享结构进行转换，从而生成文件的多个本地化版本。我意识到，我可以通过一种“简单”的模板机制来做到这一点，例如，保留一个共享根文件，其中包含字段(如{%welcome_messag
浏览 3提问于2012-04-08得票数 0
1回答
我对Julia比较陌生，最近我一直试图以并行的方式处理一些文件。我一直试图用“everywhere”和“并行函数”来加快速度，但似乎对每个行函数都不起作用。谢谢你帮忙。
浏览 3提问于2015-12-03得票数 2
回答已采纳
1回答
我正在运行一个分析泡菜文件的程序，每个泡菜都应该转换成一个文本文件(我自己的格式)。
为了有效地做到这一点，我使用N (N是一个参数)运行并行python进程。每个进程只打开并读取单个文件，将其转换为文本并将其写入单独的目录(每个pkl文件被转换为唯一的文本文件)。总之，我正在分析100 K的pkl文件，每个文件大约1MB，大约需要一天。文本转换函数(to_txt())没有任何主要的计算，只是转换到字符串。
浏览 5修改于2022-05-10得票数 1
3回答
我正在创建一个从数据库获取文件数据的程序。要求文件在存在“IMAGE_00001.JPG”、“IMAGE_00002.JPG”、.
由于性能问题，我将并行加载数据，但创建文件时会遇到问题。在我创建文件后“释放”？其他线程应该等待，直到它们能够“锁定”目录。
浏览 3修改于2013-08-29得票数 0
回答已采纳
1回答
我试图打印出文件的内容，但是每次运行这段代码时，都不会返回任何内容。我知道文件存在(因为第4行)，并且有内容。为什么这段代码不返回结果？
浏览 0修改于2015-08-07得票数 0
回答已采纳
我正在尝试改进一个扫描恶意代码文件的脚本。我们在一个文件中有一个正则表达式模式列表，每行一个模式。派生8个子进程导致代码明显变慢(142秒vs 72秒)@Ron -无法升级，这必须是通用的。
浏览 0修改于2011-10-03得票数 4
回答已采纳
我需要追加文本(行)到.json文件从多个服务器并行。这是有效的，但有一些错误(将行写到其他行的中心)。有人知道该怎么处理它吗？
浏览 1提问于2014-01-26得票数 0
2回答
假设我有一个URL列表和一个下载相应文件的函数：def fetch(url: String): File = ...我想知道有没有比这更好的并行下载这些文件的方法： urls.par.map(fetch)futureFiles.map我看到的一个问题是，现在我只能在所有文件都下载后才能访问它们。如何做到如此简洁和优雅，并且能够在下载的每个文件<
浏览 2修改于2016-10-19得票数 0
3回答
我想读取一个大文件，处理每一行并将结果插入数据库。我的目标是并行处理行，因为每个进程都是一个长时间的任务。因此，我希望一个线程继续读取，多个线程继续处理，一个线程继续在块中插入到db。我把它分解如下：2)将每一行发送到线程池(3个线程)，因为处理是一个长期运行的任务。在线程池繁忙时阻止进一步的行读取。Sidenote:文件大小约为10 to，因此我无法首先将整个文件读入内存以准备并行任务。
浏览 0修改于2018-05-16得票数 8
1回答
我有一个关于延迟装饰的问题，它可能类似于以下问题“Dask:我将如何将我的代码与dask延迟并行？”但即使在那里，它也没有得到答复。read_one(filename),l1)))
根据，它应该提高速度，但速度是一样的，如果我从大文件中读取大块
浏览 1修改于2019-02-24得票数 1
回答已采纳
2回答
e) { }}
我正在尝试计算包含两个文件的数组中的匹配数现在，虽然我在两个线程上运行它，但代码运行得不是很好，因为：谁能帮我解决这个问题(我有2核CPU和文件大小约。
浏览 0修改于2018-02-08得票数 6
回答已采纳
我需要在项目中使用WebClient将文件拆分为多个部分，并并行上传它们。到目前为止，我可以一次上传一个部分，但不确定如何并行上传它们。UploadPart(part.FilePath, part.PresignedUrl, part.Number);} 我如何修改它，以便我并行上传分块
浏览 13提问于2021-06-30得票数 1
回答已采纳
1回答
我正在使用并行任务读取一些文件。在此操作期间，如果我取消任务，文件句柄不会关闭。任务已成功取消。看起来我需要做更多的事情来在取消期间关闭文件句柄，但不能弄清楚我需要做什么。
浏览 4修改于2012-09-07得票数 0
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号