我正在使用linux上的集群系统(www.mosix.org),它允许我运行作业并让系统在不同的计算机上运行它们。作业的运行方式如下:
mosrun ls &这将自然地创建进程并在后台运行它,返回进程id,如下所示:
[1] 29199稍后它会回来的。我正在编写一个Python基础结构,可以运行作业并控制它们。为此,我想使用上面的mosrun程序运行作业,并保存派生进程的进程ID (本例中为29199)。这自然不能使用os.system或commands.getoutput完成,因为打印的ID不是要输出的进程输出的ID.有什么线索吗?
编辑
因为python脚本只是最初运行脚本,所以脚本需要比python运行得更长。我猜这意味着mosrun进程不能是脚本的子进程。有什么建议吗?
谢谢
发布于 2010-05-22 15:22:53
看起来您想要确保子进程是去梦 -- PEP 3143,我所指向的是文档,并指向引用实现,并指向其他实现。
一旦您的进程(仍在运行Python代码)被守护,无论是通过PEP 3143或其他方法提供的方法,您可以os.execl (或其他os.exec...函数)您的目标代码--这将在完全相同的进程中运行所述的目标代码,我们刚才说过的过程是去守护的,因此它一直按照需要被去守护。
最后一步不能使用subprocess,因为它需要在相同的(守护进程)中运行,覆盖它的可执行代码--这正是os.execl和朋友的目的。
第一步,在后台化之前,可能可以通过subprocess完成,但这有点不方便(您需要将守护-然后- step代码放在一个单独的.py中):最常见的情况是,您只想要os.fork并立即去守护子进程。
subprocess作为一种运行其他进程的跨平台方式非常方便,但它不能真正取代Unix的好的旧的“叉和exec”方法用于高级用途(在本例中是守护) --这就是为什么Python标准库还允许您通过模块os中的这些函数来执行后者的原因!!)
发布于 2010-05-21 18:53:52
使用subprocess模块。Popen实例有一个pid属性。
发布于 2010-05-25 13:40:33
谢谢大家的帮助。这是我最后所做的,而且工作似乎还不错。代码使用python-守护进程。也许应该做一些更聪明的事情,把这个过程从孩子转到父亲身上,但这是比较容易的部分。
import daemon
def run_in_background(command, tmp_dir="/tmp"):
# Decide on a temp file beforehand
warnings.filterwarnings("ignore", "tempnam is a potential security")
tmp_filename = os.tempnam(tmp_dir)
# Duplicate the process
pid = os.fork()
# If we're child, daemonize and run
if pid == 0:
with daemon.DaemonContext():
child_id = os.getpid()
file(tmp_filename,'w').write(str(child_id))
sp = command.split(' ')
os.execl(*([sp[0]]+sp))
else:
# If we're a parent, poll for the new file
n_iter = 0
while True:
if os.path.exists(tmp_filename):
child_id = int(file(tmp_filename, 'r').read().strip())
break
if n_iter == 100:
raise Exception("Cannot read process id from temp file %s" % tmp_filename)
n_iter += 1
time.sleep(0.1)
return child_idhttps://stackoverflow.com/questions/2884711
复制相似问题