首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Rcpp不编译具有pari.h标头的cpp源代码

问Rcpp不编译具有pari.h标头的cpp源代码
EN

Stack Overflow用户
提问于 2017-01-13 16:02:46
回答 1查看 322关注 0票数 0

我写了一个cpp源代码,其中包含pari.h头文件:

代码语言:javascript
复制
#include<string>
#include<vector>
#include<algorithm>
#include<cmath>
#include<stdlib.h>
#include<time.h>
#include<iterator> // for ostream_iterator
#include<strings.h>
#include<string.h>
#include<sstream>
#include <pari/pari.h> // for PARI/GP library
#include<Rcpp.h> // for sourceCpp to work, this line must be uncommented

// Enable C++11 via this plugin (Rcpp 0.10.3 or later)
// [[Rcpp::plugins(cpp11)]]

using namespace std;
using namespace Rcpp; // for sourceCpp to work, this line must be uncommented

// [[Rcpp::export]]
int main() {

    long maxp = 1000000; // max value
    pari_init(500000,2); // initiate pari
    size_t rsize = 500000; // set stack size variables
    size_t vsize = 100000000;

    void paristack_setsize(size_t rsize, size_t vsize); // declare stack function
    paristack_setsize(rsize, vsize); // set stack size
    gp_allocatemem(stoi(100000000)); // allocate memory
    GEN p1; // declare PARI variable

    p1 = cgetg(maxp, t_VEC); // make the PARI variable a vector
    long j; // declare the variable for the number to be checked. one above the vector iterator
    for (long i = 0; i <= maxp; ++i) { // iterate over PARI vector
        j = i + 1; // decrement index for number
        gel(p1, i) = sumdiv(stoi(j)); // calculate the sum of divisors and update the vector
    }

    vector<long> p2(maxp); // empty vector of native type
    GEN x; // declare a PARI variable to subset PARI vector
    for (long i = 0; i < maxp; i++) { // for2, across vector indices
        x = gel(p1, i); // subset one item of vector
        p2[i] = gtolong(x); // convert PARI to native long integer and update long vector item
    } // close for2

    for (long z = 0; z < maxp; z++) { // for3, to iterate for stdout
        cout << p2[z] << '\n'; // return the result. the vector items are printed separately
    } // close for3

} // close function

(请注意,可能会有不必要的头部,我通常会跨源代码复制所有这些头部,但这不是问题)。没有pari.h头的类似源文件可以使用包含必要部分(如头、名称空间、导出行等)的Rcpp编译得很好。

当Rcpp相关的引用被注释时,源代码可以很好地编译,并且在使用以下标志直接使用g++编译时没有任何问题:

代码语言:javascript
复制
g++ -lpari -fpermissive -Wall -Wextra -lm -fno-strict-aliasing -fomit-frame-pointer -o sumdivisors.o sumdivisors.cpp

我还将这些标志导入到R中:

代码语言:javascript
复制
Sys.setenv("PKG_CXXFLAGS"="-lpari -fpermissive -Wall -Wextra -lm -fno-strict-aliasing -fomit-frame-pointer")

我还在/usr/local/lib64/R/library/Rcpp/include/上创建了一个指向/usr/include下的pari目录的符号链接。

但是,sourceCpp命令的输出如下所示:

代码语言:javascript
复制
> sourceCpp("sumdivisors.cpp")
In file included from /usr/local/lib64/R/library/Rcpp/include/Rcpp/r/headers.h:48:0,
                 from /usr/local/lib64/R/library/Rcpp/include/RcppCommon.h:29,
                 from /usr/local/lib64/R/library/Rcpp/include/Rcpp.h:27,
                 from sumdivisors.cpp:15:
/usr/local/lib64/R/library/Rcpp/include/Rcpp/platform/compiler.h:47:0: warning: "GCC_VERSION" redefined
     #define GCC_VERSION (__GNUC__ * 10000 + __GNUC_MINOR__ * 100 + __GNUC_PATCHLEVEL__)                                                                                                      

In file included from /usr/local/lib64/R/library/Rcpp/include/pari/pari.h:16:0,
                 from sumdivisors.cpp:14:
/usr/local/lib64/R/library/Rcpp/include/pari/paricfg.h:19:0: note: this is the location of the previous definition
 #define GCC_VERSION "gcc version 6.2.1 20160830 (GCC)"                                                                                                                                       

Error in dyn.load("/tmp/Rtmpc9edZe/sourceCpp-x86_64-pc-linux-gnu-0.12.8/sourcecpp_188e46b44088/sourceCpp_2.so") :                                                                             
  unable to load shared object '/tmp/Rtmpc9edZe/sourceCpp-x86_64-pc-linux-gnu-0.12.8/sourcecpp_188e46b44088/sourceCpp_2.so':                                                                  
  /tmp/Rtmpc9edZe/sourceCpp-x86_64-pc-linux-gnu-0.12.8/sourcecpp_188e46b44088/sourceCpp_2.so: undefined symbol: pari_mainstack  

我在包含或不包含C++11启用行的情况下重复了这些步骤,没有任何变化。我也换了gcc的旗子,也没结果。看来,gcc版本的定义和pari_mainstack的定义都有问题。

我相信问题不在于源代码是如何编写的。下面的两个例子中,上面的cpp代码被转换成一个返回向量的代码,并且函数不是main。文中还给出了一个类似而简单的代码,可以很好地用Rcpp编译:

代码语言:javascript
复制
#include<stdio.h>
#include<numeric> // for "accumulate"
#include<iostream>
#include<string>
#include<vector>
#include<algorithm>
#include<cmath>
#include<stdlib.h>
#include<time.h>
#include<iterator> // for ostream_iterator
#include<strings.h>
#include<string.h>
#include<sstream>
#include <pari/pari.h> // for PARI/GP library
#include<Rcpp.h> // for sourceCpp to work, this line must be uncommented

// Enable C++11 via this plugin (Rcpp 0.10.3 or later)
// [[Rcpp::plugins(cpp11)]]

using namespace std;
using namespace Rcpp; // for sourceCpp to work, this line must be uncommented

// [[Rcpp::export]]
vector<long> sumdivisors() {

    long maxp = 1000000; // max value
    pari_init(500000,2); // initiate pari
    size_t rsize = 500000; // set stack size variables
    size_t vsize = 100000000;

    void paristack_setsize(size_t rsize, size_t vsize); // declare stack function
    paristack_setsize(rsize, vsize); // set stack size
    gp_allocatemem(stoi(100000000)); // allocate memory
    GEN p1; // declare PARI variable

    p1 = cgetg(maxp, t_VEC); // make the PARI variable a vector
    long j; // declare the variable for the number to be checked. one above the vector iterator
    for (long i = 0; i <= maxp; ++i) { // iterate over PARI vector
        j = i + 1; // decrement index for number
        gel(p1, i) = sumdiv(stoi(j)); // calculate the sum of divisors and update the vector
    }

    vector<long> p2(maxp); // empty vector of native type
    GEN x; // declare a PARI variable to subset PARI vector
    for (long i = 0; i < maxp; i++) { // for2, across vector indices
        x = gel(p1, i); // subset one item of vector
        p2[i] = gtolong(x); // convert PARI to native long integer and update long vector item
    } // close for2

    return(p2);
    /*
    for (long z = 0; z < maxp; z++) { // for3, to iterate for stdout
        cout << p2[z] << '\n'; // return the result. the vector items are printed separately
    } // close for3
    */

} // close function

。

代码语言:javascript
复制
#include<stdio.h>
#include<iostream>
#include<string>
#include<vector>
#include<algorithm>
#include<cmath>
#include<math.h>
#include<time.h>
#include<Rcpp.h>

using namespace std;
using namespace Rcpp;

//#include "std_lib_facilities.h"

// [[Rcpp::export]]
int pe001Cpp(int x) { // define a function pe001 with one in$teger input
    int sum35 = 0; // define a scalar for the sum. start value is 0
    for (int i=1; i<x; ++i) { // for 1 loop for counting up to x
        if (i % 3 == 0 || i % 5 == 0) { // if 1, divisible by 3 or 5
            sum35 += i; // update sum
        } // close if 1
    } // close for 1
    return sum35; // return the final value
} // close function

// [[Rcpp::export]]
int pe001Cppb(int x) { // efficient method
    int sumdivisible(int x, int y); // declare the below function in this scope
    return sumdivisible(x, 3) + sumdivisible(x, 5) - sumdivisible(x, 15); // return the total sum
} // close function pe001Cppb

int sumdivisible(int x, int y) { // sum of terms divisibile by y
    int ny = floor ((x-1) / y); // number of terms less than x and divisible by y
    return ny * (ny + 1) / 2 * y; // return the sum
} // close function sumdivisible

执行直接编译的二进制文件后,过滤后的strace输出如下:

代码语言:javascript
复制
open("/usr/lib/libpari-gmp-tls.so.5", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libstdc++.so.6", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libm.so.6", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libgcc_s.so.1", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libc.so.6", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libgmp.so.10", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libdl.so.2", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libpthread.so.0", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libnss_compat.so.2", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libnsl.so.1", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libnss_nis.so.2", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libnss_files.so.2", O_RDONLY|O_CLOEXEC) = 3

正如我们从这里看到的https://github.com/rstats-db/RPostgres/issues/80,问题可能是一个错误的链接库版本,可以通过符号链接来解决。因此,我必须知道Rcpp尝试链接哪些库文件。

更新:

Scanelf输出显示有问题的符号在/usr/lib/libpari-gmp-tls.so.2.9.1中。

代码语言:javascript
复制
[s@SS ~]$ scanelf -l -s pari_mainstack | grep pari_mainstack
ET_DYN pari_mainstack /usr/lib/libpari-gmp-tls.so.2.9.1 

g++编译文件的strace输出显示可执行文件链接到/usr/lib/libpari-gmp-tls.so.5,该文件本身是指向2.9.1版本的符号链接:

代码语言:javascript
复制
[s@SS library]$ strace ./sumdivisors3.o |& grep so | grep -v "No such file"
execve("./sumdivisors3.o", ["./sumdivisors3.o"], [/* 79 vars */]) = 0
open("/usr/lib/libpari-gmp-tls.so.5", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libstdc++.so.6", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libm.so.6", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libgcc_s.so.1", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libc.so.6", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libgmp.so.10", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libdl.so.2", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libpthread.so.0", O_RDONLY|O_CLOEXEC) = 3
socket(AF_UNIX, SOCK_STREAM|SOCK_CLOEXEC|SOCK_NONBLOCK, 0) = 3
socket(AF_UNIX, SOCK_STREAM|SOCK_CLOEXEC|SOCK_NONBLOCK, 0) = 3
open("/usr/lib/libnss_compat.so.2", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libnsl.so.1", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libnss_nis.so.2", O_RDONLY|O_CLOEXEC) = 3
open("/usr/lib/libnss_files.so.2", O_RDONLY|O_CLOEXEC) = 3

sourceCpp命令创建的sourceCpp_4.so文件的ldd输出如下所示:

代码语言:javascript
复制
[s@SS library]$ ldd /tmp/Rtmpau9YqY/sourceCpp-x86_64-pc-linux-gnu-0.12.8/sourcecpp_3a105ad2bdba/sourceCpp_4.so
        linux-vdso.so.1 (0x00007ffc28f9d000)
        libR.so => not found
        libstdc++.so.6 => /usr/lib/libstdc++.so.6 (0x00007f5077111000)
        libm.so.6 => /usr/lib/libm.so.6 (0x00007f5076e0d000)
        libgcc_s.so.1 => /usr/lib/libgcc_s.so.1 (0x00007f5076bf6000)
        libc.so.6 => /usr/lib/libc.so.6 (0x00007f5076858000)
        /usr/lib64/ld-linux-x86-64.so.2 (0x0000564489276000)

我使用ldd跟踪了所有这些文件,并且没有指向/usr/lib/libpari-gmp-tls.so.2.9.1或/usr/lib/libpari-gmp-tls.so.5库的链接。所以问题是,既然包含了必要的头文件(而g++可以),为什么sourceCpp不能链接到这些文件?

更新:

sourceCpp的详细输出显示以下命令:

代码语言:javascript
复制
g++  -I/usr/local/lib64/R/include -DNDEBUG  -I/usr/local/include  -I"/usr/local/lib64/R/library/Rcpp/include" -I"/home/s/codes/cpp/projecteuler/library"  -lpari -fpic  -g -O2 -c sumdivisors2.cpp -o sumdivisors2.o
g++ -shared -L/usr/local/lib64/R/lib -L/usr/local/lib64 -o sourceCpp_5.so sumdivisors2.o -L/usr/local/lib64/R/lib -lR

我用来设置标志(实际上-lpari就足够了:

代码语言:javascript
复制
Sys.setenv("PKG_CXXFLAGS"="-lpari")

根据gp2c的输出,-lpari标志也应该包含在链接阶段中,但是这里的链接命令没有它。这会是问题的根源吗?或者在此之前,为什么sourceCpp_5.so文件没有链接到必要的pari库?

结束语:

链接的依赖库也应该通过以下方式显式声明:

Sys.setenv("PKG_LIBS"="-lm -lpari -lc")

库标志由gp2c输出给出。顺便说一句,为了解决gcc的版本问题,我没有创建一个指向原始pari头文件目录的符号链接,而是在R库路径中创建了一个副本,并注释掉了下面这行:

//#定义GCC_VERSION "gcc版本6.2.1 20160830 (GCC)“

现在编译成功了,多亏了Rcpp,R可以在数论计算中享受PARI/GP的速度!

EN

回答 1

Stack Overflow用户

发布于 2017-01-14 02:27:21

没有pari.h头的

类似的源文件可以通过包含必要部分(如头、命名空间、导出行等)的Rcpp编译得很好。

在使用sourceCpp()时,一般用例不涉及使用pari等系统安装库,而不使用之前已建立适当链接标志的R包。因此,单独的包将处理将pari呈现给R会话,并随后为Rcpp插件管理器注册一个插件,以便// [[Rcpp::depends(pkgname)]]可以包含在头文件之后,以设置适当的链接语句。

话虽如此,让pari与Rcpp协同工作的第一步是建立一个RcppPari包,最好是在RcppGSL的模子中。

为此,您可能需要:

  • configure.ac:用于验证库是否存在于用户系统上,以及系统配置是否合适(例如,编译器是否有效;etc.)
  • src/Makevars.in:用于设置适当的预处理器标志,以处理如何编译和链接包中的代码embedded。(请参阅下面的links.)
  • r/inline.R:,以建立使用sourceCpp()和cppFunction()的搭建脚手架所需的插件(上面讨论的“理想”解决方案)。

我使用ldd跟踪了所有这些文件,并且没有指向/usr/lib/libpari-gmp-tls.so.2.9.1或/usr/lib/libpari-gmp-tls.so.5库的链接。所以问题是,既然包含了必要的头文件(而g++可以),为什么sourceCpp不能链接到这些文件?

正如您所发现的,在链接阶段没有适当地调用PKG_CXXFLAGS中的-lm -lpari -lc。相反,需要在PKG_LIB选项中设置该标志。@jtilly在评论中强调了这一点。

在开始编写包之前,您可能希望了解R中的预处理器标志对于Makevars文件的不同含义:

票数 5
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/41629890

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档