DataX从入门到精通 第2课 ETL之DataX 安装datax-web

1、下载源码

datax-web地址为https://github.com/WeiYe-Jing/datax-web

2、编译源码

使用maven 进行编译，进行到datax-web所在目录，然后执行如下命令打包

mvn -U install

 编译成功之后产物有：datax-admin（控台）、datax-executor（执行器）、datax-web（完整部署包）

 3、部署服务

1）使用datax-web-2.1.2.tar.gz进行部署，解压此文件。

 

2）准备一个mysql数据库，schema为datax-web

3）执行datax_web.sql中的脚本，文件位置为bin/db/datax_web.sql

4）编辑application.yml中的数据库信息，日志地址等

 5）shell启动datax-admin服务

经测试使用install.sh、start.sh、start-all.sh文件只适合在linux环境，无法在windows和mac直接使用，所以舍弃这种方法。

6）改造datax-admin、datax-executor为springboot项目

改造步骤省略，不懂技术的朋友可以使用ai工具来解决，如trae。

7）启动datax-admin服务

启动命令为

nohup java -Xms1g -Xmx1g -jar datax-admin-2.1.2.jar > /dev/null 2>&1 &

通过 http://localhost:8080/index.html 访问，默认账号 admin / 123456

 8）启动datax-executor服务

配置applicaiton.yml文件，这里重点配置addresses（多个admin逗号分隔）、jsonpath（datax任务的路径）、pypath（datax的可执行python路径）

 

启动命令

nohup java -Xms1g -Xmx1g -jar datax-executor-2.1.2.jar > /dev/null 2>&1 &

 登录到datax-admin系统，可以看到datax执行器已经注册成功，如果有多个执行器注册的话，这里会有多条数据。

相关资源我已经放到百度盘，有需要的关注加v入群获取。

 

 

下一节课我们将会通过一个例子来讲解如何同步数据，后续将会讲解datax的原生插件以及自研插件，敬请期待。