我正在使用spatstat来估计有害生物从道路、公路和其他道路传播的风险。然而,我相信我遇到了内存限制问题;我的数据在大陆范围内,我的计算机只有16 GB的内存。运行spatstat的as.owin()和density.psp()函数时收到的警告消息是:
Error: cannot allocate vector of size X.X. Gb我的一些同事建议我可以通过将spatstat函数as.owin()和density.psp()转换为通过C++与rcpp包一起执行来减轻内存负担。这一技术远远超出了我的舒适范围,我希望在我投入大量时间之前,能够从StackOverflow那里了解到它是否可行。
具体来说,我的问题是:
如有任何帮助和指导,将不胜感激。
非常感谢,
乔希
发布于 2022-03-30 01:19:34
首先,我非常同意海报上的说法,即快速修复不是编辑代码,而是在现有代码上投入更多的计算资源。使用云计算服务是非常谨慎的,但是重新实现、测试和验证一个全新的源代码需要更多的时间。
但不管怎样:
首先要检查的是,要创建的像素图像是否太大,无法存储在R内存中。尝试创建Z <- as.im(R, dimyx=d),其中R是包含您的空间域的矩形,d是所需图像的维度(行、列)。如果这与内存限制有关的信息失败,那么你需要一艘更大的船--我的意思是,计算机。
函数density.psp有选项method="FFT" (默认)和method="C"。你试过这两种吗?FFT方法使用更多的内存,因为它在一个巨大的傅里叶变换中完成了整个计算(在将域扩展到原来大小的几倍之后)。C方法是对所有像素和所有段的循环;它速度较慢,但除了输出光栅数据的存储空间外,所需内存相对较少。如果method="C"由于内存不足而失败,这将再次表明您要创建的光栅图像太大,无法存储在R内存中。
函数as.owin是泛型的,有28个方法。哪种方法会给你带来麻烦?您要转换成owin的数据是什么?
spatstat已经由R、C和C++混合编写。我们一直在寻找加速代码和减少内存需求的方法。如果您已经确定了一个特定的情况,代码是缓慢的,我们想知道细节。如果您确实发现了修复或加速某些代码的方法,请共享它。
https://stackoverflow.com/questions/71668756
复制相似问题