五、datax安装
1、JDK安装:
(默认路径: JAVA_HOME=/usr/local/openjdk-8)
先测试jdk是否存在:java -version
一般都存在,如果没有则安装
2、Maven安装
(路径:/opt/soft/apache-maven-3.3.9)
wget http://mirrors.tuna.tsinghua.edu.cn/apache/maven/maven-3/3.3.9/binaries/apache-maven-3.3.9-bin.tar.gz
tar -zxvf apache-maven-3.3.9-bin.tar.gz
vim /etc/profile
M2_HOME=/opt/soft/apache-maven-3.3.9 #(注意这里是maven的安装路径)
export PATH=${M2_HOME}/bin:${PATH}
source /etc/profile
- 测试
mvn -v
3.datax安装
(默认路径:DATAX_HOME=/opt/soft/datax)
#下载
wget http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz
#解压
tar -zxvf datax.tar.gz
#运行测试
python2 bin/datax.py job/job.json
#同步结束,显示日志如下:
2020-10-30 12:03:24.308 [job-0] INFO JobContainer -
任务启动时刻 : 2020-10-30 12:03:14
任务结束时刻 : 2020-10-30 12:03:24
任务总计耗时 : 10s
任务平均流量 : 253.91KB/s
记录写入速度 : 10000rec/s
读出记录总数 : 100000
读写失败总数 : 0
注意:
初始化的环境路径:/opt/apache-dolphinscheduler-1.3.9-bin/conf/env
文件查看:vim dolphinscheduler_env.sh