在Windows上安装Apache

Question

我需要在Windows机器上安装阿帕奇火花。根据文档，我应该在我的机器上安装sbt，并覆盖它的默认选项，最多使用2G的RAM。

在尝试了很多之后，我决定选择maven (我高估了默认选项来使用512 it )，并且我可以运行mvn compile，它开始下载一些依赖项，直到它到达锌服务器。它说锌服务器没有在8080端口上运行，maven的构建失败了。

是否需要在本地安装锌服务器并将其添加到Windows路径？我可以在没有服务器的情况下编译我的项目吗？

Answer 1

我刚刚开始学习Apache，所以我可能还远没有找到正确的答案。它为我在Mac上工作，所以你的工作可能会有所不同。

构建过程用建筑描述。

Spark使用简单的构建工具，它与它捆绑在一起。要编译代码，请进入顶级星火目录并运行 sbt/sbt组件

我没有更改默认的生成设置来执行程序集。

昨天的建设从源头：

jacek:~/oss/spark
$ sbt/sbt assembly
...
[success] Total time: 3632 s, completed May 6, 2014 2:39:07 AM

今天的构建来自于一些环境变量，这些环境变量为最终程序集添加了很少的其他模块：

jacek:~/oss/spark
$ SPARK_HADOOP_VERSION=2.4.0 SPARK_YARN=true SPARK_HIVE=true sbt/sbt assembly
...
[success] Total time: 4564 s, completed May 7, 2014 1:49:56 AM