错误未找到值火花导入spark.implicits._导入spark.sql

Question

我在一个hadoop集群上使用hadoop 2.7.2、HBASE1.4.9、SPAC2.2.0、Scala2.11.8和java1.8，该集群由一个主服务器和两个从服务器组成。

启动集群后，当我运行shell时，它工作得很好。--我正试图通过遵循本教程：[https://www.youtube.com/watch?v=gGwB0kCcdu0][1]，使用scala连接到hbase。

但是，当我试图像他那样通过添加类似于参数的罐子来运行火花壳时，我有一个错误：

火花-外壳

<console>:14: error: not found: value spark
       import spark.implicits._
              ^
<console>:14: error: not found: value spark
       import spark.sql
              ^

在那之后，即使我退出，运行火花壳下一次，我有同样的问题。有谁能告诉我原因是什么，以及如何解决。

Answer 1

在导入语句中，spark应该是SparkSession类型的对象。该对象应该是以前为您创建的。或者您需要自己创建它(阅读火花文档)。我没看你的教程录像。

关键是它不一定要被称为spark。例如，它可以称为sparkSession，然后您可以执行import sparkSession.implicits._