回答情况：
提问时间：
问题标签：
spark.executor.cores <- 2conf$spark.executor.instances <- 5conf$sparklyr.verbose <- TRUE
master = "yarn",
version = "2.4.3",
浏览 8修改于2022-10-19得票数 0
有没有人概述一下SparkR和sparklyr的优缺点？谷歌没有产生任何令人满意的结果，两者似乎相当相似。尝试这两种方式，SparkR看起来要麻烦得多，而sparklyr非常简单(既要安装，也要使用，特别是在使用dplyr输入时)。sparklyr只能用于并行运行dplyr函数，还是“普通”的R-Code？
最好的
浏览 0修改于2018-01-15得票数 53
我正在尝试使用R中的sparklyr包连接到spark，我得到了以下错误：> library(dplyr)
> sc <-, --jars, "C:/Users&
浏览 13提问于2017-01-25得票数 0
我想从我在SparklyR中的模型中提取SparklyR。到目前为止，我有以下可重复的代码正在工作：library(dplyr)
dtrain
浏览 2提问于2022-03-16得票数 0
我正在尝试从下面的链接安装sparklyr "0.8.4“的最新版本。install.packages("C:/Users/USER/Downloads/sparklyr-0.8.4.tar.gz", repos = NULL, type="source")In R CMD INSTALL
[1] ‘0.8.4’> library(
浏览 0修改于2018-07-18得票数 0
回答已采纳
我正在尝试使用分类预测器在sparklyr上运行lm。在普通R中工作的示例在sparklyr中失败：lm(Petal.Length ~ as.factor(Species), data = iris)
...
21/06/09 22:48:01 ERROR sparklyr: RScript (3130) terminated unexpectedly: contrasts can be: Worker (3130) failed to complete
浏览 7提问于2021-06-10得票数 2
我正在尝试使用sparklyr或SparkR连接到数据库。install.packages("sparklyr")
Failed to
浏览 0提问于2018-11-27得票数 1
library(dplyr) config <- spark_config() Log: /tmp/RtmpoNJQEH/f
浏览 2修改于2018-11-13得票数 2
Sparklyr处理分类变量library(dplyr)sc <- spark_connect(master = "local", version = spark_version64-bit)
spark_version(sc)
浏览 5修改于2018-11-13得票数 3
回答已采纳
spark_connect(master = "local")Error in force(code) : Parameters: --class, sparklyr.Backend, "C:\Users\jvangeete\Documents\R\win-librar
浏览 0修改于2020-06-20得票数 4
回答已采纳
在Linux服务器上使用相同的代码安装SparklyR时遇到了一些问题，这些代码直到昨天都工作得很顺利。我尝试过使用安装/卸载的DBI、jsonlite和dplyr的各种组合。在此之前，一切似乎都运行得很好：** package ‘sparklyr’ successfully unpackedomitted in the method definition cannot be in the signature
Error : unable
浏览 0提问于2017-03-09得票数 1
希望将一些R代码转换为Sparklyr，函数如lmtest::coeftest()和三明治：：三明治()。尝试开始使用Sparklyr扩展，但对Spark非常陌生，并且有问题:(第一步是使用linalg库创建一个对象：
library(sparklyr
浏览 2提问于2017-06-17得票数 14
回答已采纳
我使用sparklyr的spark_write_table函数将表写入到HDFS中，并使用partition_by参数定义如何存储它们： spark_write_table在sparklyr中是否有相应的选项可以正确完成此操作？我在文档中找不到它。
重复说明:这个问题特别是关于如何在R中使用sparklyr函数来做这件事，而另一个问题是关于一般的配置单元语法
浏览 0修改于2018-08-06得票数 2
library(sparklyr)home <- "/usr/hdp/current/spark-client"我已经成功地使用<em
浏览 2修改于2017-04-07得票数 1
回答已采纳
我使用Sparklyr库从R到HDFS读取和写入数据。读取数据的工作原理是预期的，但是写入会带来问题。为此，我使用了sparklyr sdf_copy_to函数(也尝试过使用copy_to)。
浏览 2提问于2017-03-01得票数 3
我想在sparklyr数据帧上填充值(用以前的值替换NAs )，该字段保存字符串。我想改变这一点： ID, String2 NaN4 NaN 要这样做： ID, String2 a4 b 有没有办法在sparklyr
浏览 29提问于2019-01-18得票数 2
我按照指南中的说明安装了SparklyR和Spark的本地版本：library(sparklyr) at org.apache.spark.sql.DataFrame.collect(DataFrame.scala:1480) at <
浏览 11提问于2017-01-11得票数 2
我试着用Sparklyr把R和火花连接起来。我遵循了rstudio博客的教程
devtools::install_github("rstudio/sparklyr")也很好，现在我的sparklyr版本是sparklyr<
浏览 9修改于2016-10-17得票数 5
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号