我使用以下代码
ORT<-sqlQuery(channel, "Select ort FROM test")
ORT<-ORT[,c("ort")]
ORT<-as.list(ORT)
ORT <- parLapply(cl,ORT,function(ORT) cleanup(ORT))
sqlSave(channel, ORT,tablename="table_name1")首先,我将Sql数据库的一个列加载到R中,这很好。接下来,我想使用并行包运行一个函数。这是第一个问题,ORT需要是字符向量,但是Sql将向量作为数据框架导入。有什么快速转换的方法吗?因为矢量包含1000万个条目。
下一个问题是:如何将数据向量保存回数据库,我的sqlSave命令不工作!
发布于 2013-11-11 11:57:58
当您执行ORT<-ORT[,c("ort")]时,我怀疑R正在分配新内存并复制ORT$ort的内容。如果只保留数据帧并将ORT$ort传递给parLapply,则可以跳过此步骤。(还请注意,您不需要as.list步骤。parLapply接受向量。)
如果这是你分析的缓慢部分,我会感到惊讶的。从数据库读取和写入数据库通常比分配新的向量花费更长的时间。
如果要将结果作为向量用于sqlSave,则使用parSapply而不是parLapply。
https://stackoverflow.com/questions/19901484
复制相似问题