DataX 整合后重新编译打包

摘要:
1、 在CentOS中重新编译、打包并安装Maven:wgethttp://repos.fedorapeople.org/repos/dchen/apache-maven/epel-apache-maven.repo-O/etc/yum.repos.d/epel-apache-maven.repoyum-yinstallapache-maven下载源代码:gitclonehttps://github.co

一、在CentOS中重新编译打包

安装Maven:

wget http://repos.fedorapeople.org/repos/dchen/apache-maven/epel-apache-maven.repo -O /etc/yum.repos.d/epel-apache-maven.repo

yum -y install apache-maven

下载源码:

git clone https://github.com/alibaba/DataX.git

修改代码后,重新编译打包

mvn clean package -DskipTests assembly:assembly

编译打包后的都放在target下,例如:

/usr/local/DataX/mysqlwriter/target/datax/plugin/writer/mysqlwriter

二、在IDEA中重新打包

DataX 整合后重新编译打包第1张

DataX 整合后重新编译打包第2张

DataX 整合后重新编译打包第3张

 重新编译打包时,可以把pom.xml文件中的不用的先注掉,这样编译打包会快一些

DataX 整合后重新编译打包第4张

免责声明:文章转载自《DataX 整合后重新编译打包》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇python 换行符的识别问题,Unix 和Windows 中是不一样的vue项目---获取购物车中所有商品列表并加载显示下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

datax同步json中文乱码问题

datax自带的jdbc连接工具mysql-connector-java-5.1.34.jar自带bug,同步json数据时,会将中文转换为乱码,需要替换为较新版本,这里我替换为mysql-connector-java-5.1.49.jar,事情完美解决。 json数据中文乱码问题与useUnicode=true&characterEncoding...

oracle 迁移到clickhouse 45亿条数据

原文链接:http://www.520mwx.com/view/90469 45亿数据迁移记录 背景 数据库数据量日益增加,逐渐开始显得很是臃肿,日常查询统计的时候,仅仅是count(1) 查询下总数,耗费的时间也在500s左右,而且之前的orcle数据库,前期建立的时候,也未考虑太多,未进行索引,分表,等优化。后面鉴于种种考虑,以及后期的规划,准备...

[大数据技术]datax的安装以及使用

1、datax简述 DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据源之间高效的数据同步功能。  datax的开源地址:https://g...

安装Datax可视化页面

本文仅为我在win运行 需要准备的环境:JDK1.8,python3.7,mysql5.7,maven3.39(maven版本可以不一致) 工具:pycharm2020,idea2019 代码:https://gitee.com/WeiYe-Jing/datax-web?_from=gitee_search   1.将下载好的datax-web项目,通...

ABAP-供应商主数据创建(冻结和解冻供应商的采购组织)

FUNCTION zmm_fm_21_06.*"----------------------------------------------------------------------*"*"本地接口:*"  IMPORTING*"     VALUE(IN) TYPE  ZSLIFNR_SRM*"  EXPORTING*"     VALUE(OUT...

Datax3.0使用说明

原文链接:https://github.com/alibaba/DataX/blob/master/introduction.md 一、datax3.0介绍 1、DataX 是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。 2...