当使用ParallelGroup中的分布式组件在MPI下运行分析时,在向分析中添加DumpRecorder时会出现错误。下面是一个小示例,说明了这一点(这是运行在最新的主分支提交aaa67a4d51f4081e9e41b250b0a76b077f6f0c21从28/10/2015):
import numpy as np
from openmdao.core.mpi_wrap import MPI
from openmdao.api import Component, Group, DumpRecorder, Problem, ParallelGroup
class Sliced(Component):
def __init__(self):
super(Sliced, self).__init__()
self.add_param('x', 0.)
self.add_output('y', 0.)
def solve_nonlinear(self, params, unknowns, resids):
unknowns['y'] = params['x'] * 2.
class VectorComp(Component):
def __init__(self, size):
super(VectorComp, self).__init__()
self.add_param('xin', np.zeros(size))
self.add_output('x', np.zeros(size))
def solve_nonlinear(self, params, unknowns, resids):
unknowns['x'] = params['xin'] * 2.
class Analysis(Group):
def __init__(self, size):
super(Analysis, self).__init__()
self.add('v', VectorComp(size), promotes=['*'])
par = self.add('par', ParallelGroup())
for i in range(size):
par.add('sec%02d' % i, Sliced())
self.connect('x', 'par.sec%02d.x' % i, src_indices=[i])
if __name__ == '__main__':
if MPI:
from openmdao.core.petsc_impl import PetscImpl as impl
else:
from openmdao.core.basic_impl import BasicImpl as impl
p = Problem(impl=impl, root=Analysis(4))
recorder = DumpRecorder('optimization.log')
# adding specific includes works, but leaving it out results in a crash
# recorder.options['includes'] = ['x']
p.driver.add_recorder(recorder)
p.setup()
p.run()引发的错误是:
RuntimeError: Cannot access remote Variable 'par.sec00.x' in this process.我看到记录器在每个处理器上转储一个文件,那么BaseRecorder._filter_vectors方法不应该过滤掉特定处理器上不存在的参数吗?我对代码还不太熟悉,所以我希望OpenMDAO开发人员能够很容易地找出问题所在。
手动指定包含的工作,因为切片参数然后被排除,但这是很好的,这是不必要的,并在引擎盖下处理。
我也想让你们知道我们对新框架有多兴奋。它是如此之快,以至于0.x版本,和并行FD功能是非常欣赏和工作像一个魅力!
发布于 2015-11-02 13:33:35
最近发生了一些变化,把转储记录器弄坏了。我们为某人准备了一个故事来修复它,但在此期间,您可能需要尝试一下SqliteRecorder录音机。这就是我一直用在干部身上的性能测试。您可以以相同的方式设置它,但随后使用sqlitedict读取值。文档中有一个小示例,但在干部代码中有一个更实际的例子:
https://stackoverflow.com/questions/33474823
复制相似问题