- 综合排序
- 最热优先
- 最新优先
- 来自专栏容器计算
【Spark】用scala2.11编译打包构建镜像
scala-2.11/jars/apacheds-kerberos-codec-2.0.0-M15.jar /root/tx/spark-all/spark/assembly/target/scala- /assembly/target/scala-2.11/jars/chill-java-0.9.3.jar /root/tx/spark-all/spark/assembly/target/scala- /scala-2.11/jars/commons-httpclient-3.1.jar /root/tx/spark-all/spark/assembly/target/scala-2.11/jars/ /target/scala-2.11/jars/curator-client-2.7.1.jar /root/tx/spark-all/spark/assembly/target/scala-2.11/ /target/scala-2.11/jars/gson-2.2.4.jar /root/tx/spark-all/spark/assembly/target/scala-2.11/jars/guava
1.4K41发布于 2020-07-27 - 来自专栏深蓝居
在Ubuntu下搭建Spark群集
安装完成后运行scala -version可以看到安装的Scala的版本，我现在2.11版，安装目录是在/usr/share/scala-2.11 。 接下来下载Spark。 spark-env.sh.template spark-env.sh 然后编辑该文件 vi spark-env.sh 在文件的末尾我们添加上以下内容： export SCALA_HOME=/usr/share/scala
58710编辑于 2022-06-16 - 来自专栏绿巨人专栏
Spark集群 + Akka + Kafka + Scala 开发(4) : 开发一个Kafka + Spark的应用
org.apache.spark:spark-streaming-kafka-0-8_2.11:2.0.0 --master spark://$(hostname):7077 --class ConsumerApp target/scala /target/scala-2.11/kafka-sample-app_2.11-1.0.jar:$KAFKA_HOME/libs/* ProducerApp # or # $KAFKA_HOME/bin /target/scala-2.11/kafka-sample-app_2.11-1.0.jar:$KAFKA_HOME/libs/* ProducerApp 然后：看看Consumer应用是否收到了消息
1.1K70发布于 2018-05-18 - 来自专栏绿巨人专栏
Spark集群 + Akka + Kafka + Scala 开发(3) : 开发一个Akka + Spark的应用
Server应用 运行： $SPARK_HOME/bin/spark-submit --master spark://$(hostname):7077 --class ServerApp target/scala /target/scala-2.11/akka-sample-app_2.11-1.0.jar:$AKKA_HOME/lib/akka/*:$SCALA_HOME/lib/* ClientApp # or # $SPARK_HOME/bin/spark-submit --master spark://$(hostname):7077 --class ClientApp target/scala-2.11
1.5K120发布于 2018-05-18 - 来自专栏绿巨人专栏
Spark集群 + Akka + Kafka + Scala 开发(2) : 开发一个Spark应用
/target/scala-2.11/simple-application-project_2.11-1.0.jar ... [info] Done packaging. project in local with 4 threads $SPARK_HOME/bin/spark-submit --master local[4] --class SimpleApp target/scala the project $SPARK_HOME/bin/spark-submit --master spark://$(hostname):7077 --class SimpleApp target/scala
88050发布于 2018-05-18 - 来自专栏我是攻城师
hive on spark 测试
change-scala-version.sh 2.11 mvn -Pyarn -Phadoop-2.7.1 -Dscala-2.11 -DskipTests clean package 编译完成后，拷贝ssembly/target/scala
1.5K90发布于 2018-05-14 - 来自专栏Hadoop实操
如何在Kerberos环境下的CDH集群部署Spark2.1的Thrift及spark-sql客户端
Spark2的HOME目录创建如下目录： [root@cdh02 ~]# mkdir -p /opt/cloudera/parcels/SPARK2/lib/spark2/launcher/target/scala 注意：部署spark-sql客户端时需要创建$SPARK_HOME/launcher/target/scala-2.11目录，否则启动会报“java.lang.IllegalStateException
2.5K30发布于 2018-07-11 - 来自专栏xingoo, 一个梦想做发明家的程序员
[大数据之Spark]——快速入门
/target/scala-2.11/simple-project_2.11-1.0.jar # Use spark-submit to run your application 通过spark-submit 提交任务jar包 $ YOUR_SPARK_HOME/bin/spark-submit \ --class "SimpleApp" \ --master local[4] \ target/scala
1.8K90发布于 2018-01-17 - 来自专栏AILearning
Apache Spark 2.2.0 中文文档 - 快速入门 | ApacheCN
/target/scala-2.11/simple-project_2.11-1.0.jar # Use spark-submit to run your application $ YOUR_SPARK_HOME /bin/spark-submit \ --class "SimpleApp" \ --master local[4] \ target/scala-2.11/simple-project_
1.8K80发布于 2018-01-05 - 来自专栏ApacheHudi
Apache Flink 1.12.2集成Hudi 0.9.0运行指南
apache/hudi•git clone https://github.com/apache/hudi.git && cd hudi•mvn clean package -DskipTests注意：默认是用scala
2.5K40发布于 2021-04-13 - 来自专栏我是攻城师
Intellj IDEA +SBT + Scala + Spark Sql读取HDFS数据
val jarPaths="target/scala-2.11/spark-hello_2.11-1.0.jar" /**Spark SQL映射的到实体类的方式**/ def mapSQL2()
2.2K80发布于 2018-05-11 - 来自专栏小鹏的专栏
scala-sparkML学习笔记：scala解析json文件
>2.3</version> </dependency> </dependencies> </profile> <profile> <id>scala
1.6K10发布于 2019-09-06 - 来自专栏积累沉淀
Spark安装
我的安装版本是spark-1.6.1-bin-hadoop2.6.tgz 这个版本必须要求jdk1.7或者1.7以上 安装spark必须要scala-2.11 版本支撑 我安装的是scala
1K70发布于 2018-01-11 - 来自专栏大数据成神之路
尝鲜！Flink1.12.2+Hudi0.9.0集成开发
apache/hudi git clone https://github.com/apache/hudi.git && cd hudi mvn clean package -DskipTests 注意：默认是用scala
1.4K60发布于 2021-05-07 - 来自专栏大数据，java，Python和前端
Flink on Yarn编译的Parcels包到CDH集群实录
1.12.4/flink-dist/target/flink-1.12.4-bin/目录下：tar -zcf flink-1.12.4-bin-scala_2.11.tgz flink-1.12.4/至此，依赖Scala
36410编辑于 2025-07-21 - 来自专栏咻一咻
Linux及常用工具配置
/lib:${JRE_HOME}/lib export PATH=$PATH:${JAVA_HOME}/bin - - - Scala 无需安装，直接解压缩后配置环境变量既可用，但需要先安装Jdk 以scala -2.11为例，修改环境变量，在末尾添加以下几行（配置完毕后不要忘记使用source令环境变量生效） export SCALA_HOME=/usr/lib/scala/scala-2.11 (scala
2.3K20发布于 2020-06-19 - 来自专栏python前行者
[1015]spark-submit提交任务及参数说明
--driver-memory 1g \ --executor-memory 1g \ --executor-cores 1 \ --queue thequeue \ examples/target/scala
9.9K21发布于 2021-07-14 - 来自专栏函数式编程语言及工具
Scala Macros － 元编程 Metaprogramming with Def Macros
compile [info] Compiling 1 Scala source to /Users/tiger-macpro/Scala/IntelliJ/learn-macro/macros/target/scala 7.876 s [info] Compiling 1 Scala source to /Users/tiger-macpro/Scala/IntelliJ/learn-macro/demos/target/scala
3.4K90发布于 2018-01-05 - 来自专栏大数据-BigData
Flink on Zeppelin 作业管理系统实践
以下是Flink on Zeppelin 主要feature： Feature Feature 说明 多版本Flink支持 同时支持 Flink 1.10 到 1.15 的 6 个大版本，并且同时支持Scala
2.6K20编辑于 2022-09-08 - 来自专栏快乐阿超
Apache-StreamPark发版编译并上传svn
1 [StreamPark] build info: package mode @ mixed, scala-2.11, now build starting...
25110编辑于 2024-10-14
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号