垃圾收集python子进程

文章/答案/技术大牛

发布

1回答

垃圾收集如何与多个正在运行的进程/线程一起工作？

python、python-2.7、garbage-collection、multiprocessing

我有一个类似服务器的Python程序，它接收数据包，并根据数据包的类型进行处理。为此，我使用multiprocessing模块生成了多个进程。我注意到垃圾收集在操作过程中会造成一些延迟，并且数据包没有在所需的时间范围内处理。我知道如何禁用垃圾收集：gc.disable() 但是，我的问题是，当涉及多个进程或线程时，Python究竟是如何处理垃圾收集的？进程或线程的垃圾<

浏览 1提问于2014-04-24得票数 8

回答已采纳

1回答

忽略Popen的返回值安全吗？

python、python-2.7、subprocess

我需要我的python (2.7)程序启动子进程，并且在子进程运行时继续处理。所以我不希望主程序等待子进程终止。这显然是通过Popen来实现的，它返回一个类对象。忽略Popen的返回值安全吗？垃圾收集器是否删除popen对象？是否在子进程终止后对对象进行垃圾回收？我不能用python文档回答这些问题。请注意，我使用python2.7是因为

浏览 13提问于2020-10-20得票数 2

1回答

python、concurrent.futures

子进程保留内存，直到它们接收到新任务。如何强制子进程有效地进行垃圾回收？range(1, 1000000)] # do something with future result 在上面的例子中，我在一个子进程中创建了一个大对象从这一点开始，我可以处理父进程中的内存，但是由我的ProcessPoolExecutor创建的子进程将无限期地持有为我的任

浏览 13提问于2019-01-09得票数 2

回答已采纳

1回答

子进程垃圾收集器是否阻塞父进程主线程？

c#、.net、garbage-collection

如果您用System.Diagnostics.Process类启动子进程，而这个子进程分配垃圾，那么这个垃圾的垃圾收集会只在子进程中发生吗？

浏览 3提问于2015-09-17得票数 0

回答已采纳

1回答

多处理中共享数据的垃圾收集

python、multiprocessing、shared-memory

我正在linux中执行一些多进程处理，我使用的共享内存目前还没有显式传递给子进程(不是通过参数)。在正式的processes 中，在“显式地将资源传递给子进程”一节中，它被写成：在Unix上，使用叉启动方法，子进程可以使用在父进程中使用全局资源创建的共享资源。但是，最好将对象作为参数传递给子进程的构造函数.这个..。确保只要子进程仍然处于活动状态，对象就不会在父进程中被

浏览 0提问于2018-10-18得票数 1

回答已采纳

1回答

django中类和实例变量的生存期和作用域

django、python-2.7

虽然这里已经有很多关于python中不同变量的存在的问题和答案，但我想了解它们如何在应用程序范围和端点范围方面转换为django环境。如果有关系，我正在运行Python2.7.6和django 1.5.12。需要升级的解决方案可能也很有用，但对我来说不是一个直接的选择。

浏览 0提问于2016-12-20得票数 1

回答已采纳

1回答

node.js子流程对象生命周期

javascript、node.js、garbage-collection、fork、child-process

但我对一个与node.js子进程相关的情况感到困惑。当函数bar()完成执行时，它应该是垃圾收集的。注册用于接收子进程消息的事件处理程序只是保存在“子”对象的哈希表中(子对象也是基于node.js子进程模块的文档的node.js实例)，因此这些哈希表也应该作为本地“子”对象被回收时被垃圾收集。\app.js那么，看起来<

浏览 2提问于2021-03-06得票数 1

回答已采纳

1回答

分叉进程是否通过删除它们的引用对象来回收垃圾？

javascript、node.js

我有一个服务，需要在一个循环中保持多个分叉进程。当我完成一个进程时，我不调用child.kill()，而是移动包含子对象的数组(删除引用对象)。// [true, true] children.map(c => c.connected)移位后，被删除的子进程是否被父进程完全垃圾收集

浏览 3提问于2021-12-09得票数 1

回答已采纳

1回答

用python随机“冻结”填充MySQL数据库

python、mysql、database、pandas、sqlalchemy

我的脚本使用sqlalchemy连接到MySQL数据库engine = create_engine("mysql+mysqlconnector://user:password@ip:port/dbName")df.to_sql(tableName, con=engine, flavor='mysql', schema=None, if_exists='replace', index=False

浏览 1提问于2016-03-16得票数 0

1回答

如何为多处理池中的单个进程分配python请求会话？

python、python-3.x、session、python-requests、python-multiprocessing

multiprocessing.Pool() as pool:例如，Session被赋值为全局变量，因此在Pool中创建进程之后，它将被复制到每个子进程中。我不确定会话是否线程安全，会话中的池如何工作，所以我想为池中的每个进程分配单独的会话对象。我不太熟悉python的多重处理，到目前为止我只使用了池，因为它是最好的解决方案，可以在没有关键部分的情况下并行处理数据，所以我可以使用不同的解决方案。有什么方法可以做到

浏览 0提问于2018-10-09得票数 6

2回答

垃圾收集器是否在单独的进程中运行？

c#、.net、garbage-collection

垃圾收集器是否在单独的进程中开始？或者像这样？ //代码(<e

浏览 3提问于2015-03-23得票数 26

回答已采纳

4回答

Rust的圆弧和Rc类型与垃圾收集有什么不同？

pointers、garbage-collection、rust

说Rust没有垃圾收集器：我认为垃圾回收是防止手动释放动态分配内存的任何进程。不过，我想我不明白锈菌指南认为什么是垃圾收集。

浏览 4提问于2014-12-26得票数 8

回答已采纳

1回答

CPython的垃圾收集会进行压缩吗？

python、memory-management、garbage-collection、cpython

我和一个朋友在比较语言，他提到Java的自动内存管理优于Python，因为Java的压缩，而Python的没有--因此对于长期运行的服务器来说，Python是一个糟糕的选择。CPython的垃圾收集器没有压缩内存，因此，随着时间的推移，长期运行的Python进程变得越来越零碎吗？我知道运行CPython的垃圾收集器是可选的。它通常使用自动引用计数来进行自动内存管理，一旦引用计数达到零，对象就会被释放-因此，就释放对象而言，CPyth

浏览 0提问于2016-02-09得票数 4

回答已采纳

2回答

如何让Apache/mod_python进程收集它的僵尸？

python、apache、apache2、mod-python

Apache/2.2.6 (Unix) DAV/2 mod_python/3.2.8 Python/2.4.4 configured ...一个apache进程异步地产生一些长时间运行的python脚本，并且似乎没有收集它的子进程表条目。在这个长时间在子进程中运行的python脚本结束后，就剩下了一个废弃的python进程。00:00:00

浏览 0提问于2008-10-16得票数 2

4回答

如何在多线程环境中实现垃圾收集？

linux、multithreading、memory-management、garbage-collection、x86

如何在由多个线程或进程组成的程序中执行垃圾回收？每个进程都需要自己的垃圾收集例程吗？在独立于实际程序的线程/进程中运行垃圾收集器是个好主意吗？

浏览 2提问于2008-12-28得票数 3

回答已采纳

1回答

如何在使用hglib时停止hg子进程？

python、mercurial、hglib

我在Mercurial中有一个Python应用程序。在应用程序中，我发现需要显示它当前运行的提交。到目前为止，我找到的最好的解决方案是使用hglib。我现在的问题是，这会留下一个hg子进程运行，这对我来说是无用的，因为一旦这个模块完成初始化，我就不需要再使用hglib了。在我完成hg子</e

浏览 3提问于2015-07-03得票数 1

回答已采纳

1回答

姜戈芹菜记忆没有释放

django、memory-leaks、celery、django-celery

watch -n 1 'ps ax -o rss,user,command | sort -nr | grep celery |head -n 5' 每次我调用任务时，它都会增加celeryd/worker进程的内存消耗

浏览 1提问于2014-03-31得票数 3

2回答

为什么Popen()函数在Python和PyGTK中的行为不同？

python、pygtk

我在Python程序中编写了这两行代码，它们运行得很好：import pygtk,sys,gtk,os,subprocess def main(self, argv=None): gtk.main

浏览 5提问于2011-05-29得票数 1

2回答

生成大型报告

django、database

当我为一个巨大的数据库生成报告时，我遇到了这个问题。我的应用程序是django的，当我点击这个从一个巨大的数据库生成报告的报告时，它会在很长一段时间内消耗大量的内存和CPU。但是，一旦报告生成完成，它仍然不会释放内存，因此我的服务器显示了一些问题。实际上，我没有使用任何类型的过滤器来限制获取的记录数量。因此，它会获取所有记录并尝试生成报告。这无疑会消耗大量的内存和CPU。有什么建议吗？

浏览 1提问于2011-08-29得票数 0

3回答

MacOSX可以将多个NSApplications组合在一起，使它们看起来像一个吗？

cocoa、user-interface、macos

我试图将我的应用程序分成不同的子进程，每个子进程做一件非常具体的事情。主要原因是稳定性和更好的内存利用率，因为我使用了保守的垃圾收集器(Boehm Weisser)。不幸的是，子进程必须显示一些窗口，因此它们将需要NSApplication实例。有没有办法做到这一点？

浏览 4提问于2009-09-10得票数 1

点击加载更多

垃圾收集如何与多个正在运行的进程/线程一起工作？

忽略Popen的返回值安全吗？