datax编译

大数据最后一公里

发布于 2021-08-05 10:13:13

2.8K0

文章被收录于专栏：大数据最后一公里大数据最后一公里

编译datax

编译datax0、前置环境1、下载源码2、第一次编译（失败）3、第二次编译（成功）4、编译成功之后5、测试

0、前置环境

maven
- 需要在windows下配置环境变量
idea
java

1、下载源码

 git clone https://github.com/alibaba/DataX.git

2、第一次编译（失败）

第一次编译时，遇到这个问题

解决办法：

2.1 下载源码

 git clone https://github.com/julianhyde/eigenbase-properties.git

2.2 将源码编译成jar包

 mvn clean install

2.3 手动安装jar包

 mvn install:install-file -DgroupId=eigenbase -DartifactId=eigenbase-properties -Dversion=1.1.4 -Dpackaging=jar -Dfile=D:/download/eigenbase-properties-master/target/eigenbase-properties-1.1.7-SNAPSHOT.jar

3、第二次编译（成功）

第二次编译时，我是在cmd窗口执行maven

  mvn -U clean package assembly:assembly -Dmaven.test.skip=true
  
  #说明
  datax有test模块，需要一些依赖包，否则会报错，可以指定参数跳过这个-Dmaven.test.skip=true

控制台日志如下

4、编译成功之后

编译之后，datax.tar.gz包在target下面，上传到服务器解压即可

5、测试

导入数据之前

导入数据之后

datax执行日志

本文参与腾讯云自媒体同步曝光计划，分享自微信公众号。

原始发表：2021-07-06，如有侵权请联系 cloudcommunity@tencent.com 删除

打包

jar

maven

腾讯云测试服务

本文分享自大数据最后一公里微信公众号，前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体同步曝光计划，欢迎热爱写作的你一起参与！

登录后参与评论

0 条评论

热度

datax编译

datax编译

编译datax

0、前置环境

1、下载源码

2、第一次编译（失败）

3、第二次编译（成功）

4、编译成功之后

5、测试

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐