首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >错误:值简洁不是org.apache.spark.rdd.RDD[String]的成员

错误:值简洁不是org.apache.spark.rdd.RDD[String]的成员
EN

Stack Overflow用户
提问于 2016-07-08 18:43:40
回答 0查看 101关注 0票数 2

我正在尝试使用succinctRDD作为搜索机制。以下是我根据文档所做的尝试:

代码语言:javascript
复制
import edu.berkeley.cs.succinct.kv._
val data = sc.textFile("file:///home/aman/data/jsonDoc1.txt")
val succintdata = data.succinct.persist()

链接在这里...succint RDD

我得到的错误如下所示

代码语言:javascript
复制
<console>:32: error: value succinct is not a member of org.apache.spark.rdd.RDD[String]
         val succintdata = data.succinct.persist()  

如果有人可以在这里指出问题,或者在此之前我应该遵循的任何步骤。

这基本上是sbt构建。

代码语言:javascript
复制
name := "succinttest"

version := "1.0"

scalaVersion := "2.11.7"
resolvers += "Spark Packages Repo" at "http://dl.bintray.com/spark-packages/maven"
libraryDependencies += "org.apache.spark" % "spark-core_2.11" % "1.5.2"
libraryDependencies += "org.apache.kafka" % "kafka_2.11" % "0.8.2.2"
libraryDependencies += "org.apache.spark" % "spark-streaming_2.11" % "1.5.2"
libraryDependencies += "org.apache.spark" % "spark-sql_2.11" % "1.5.2"
libraryDependencies += "amplab" % "succinct" % "0.1.7"
libraryDependencies += "org.apache.hadoop" % "hadoop-common" % "2.6.0" excludeAll ExclusionRule(organization = "javax.servlet")
EN

回答

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/38264702

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档