Cloudera Spark2安装

Question

我正在按照cloudera关于安装这个组件的说明在cloudera集群(评估版本)中安装Spark2。我下载了CSD，安装了它，使用了这个包下载了组件，分发了它，但是当我试图激活它时，我收到了这样的消息：

SPARK2 (2.2.0.cloudera1-1.cdh5.12.0.p0.142354)所需的CDH (5.8及以上)包不可用。

这是专题组的信息：

版本: Cloudera Enterprise Data Hub Edition试用版5.12.1 (#6由jenkins在20170818-0807 git上构建:9bde611802535491d400e03c98ef694a2c77d0a) Java名称: HotSpot(TM) 64位服务器VM Java VM供应商: Oracle公司 Java版本: 1.7.0_67

惩教署

SPARK2 2_ON纱-2.2.0.Cloudera1.jar

包裹

http://archive.cloudera.com/spark2/parcels/2.2.0.cloudera1/

我想这可能是因为我的CDH版本(5.12.1)和最后一个spark2包的版本(cdh5.12.0)，但是我没有找到cdh5.12.1的任何其他包，我的下一个问题是: cdh5.13.0是spark2包吗？

Answer 1

终于解决了。问题是，我需要更新de核心，更新后，火花2只是工作良好。

Answer 2

错误信息具有误导性。真正的问题是您的集群运行在Java1.7上。Spark 2.2只支持Java 1.8。升级集群上的Java，您应该能够安装Spark2.2包。