DataX学习

DataX下载

DataX学习

环境配置

  • 安装python环境

安装python2 版本。安装python3在执行任务时,bin 目录下的 datax.py 中 print 处会报语法错误

print xxxx       python3 必须在print后面加()

DataX学习

测试

  • 创建测试表

源表数据:                                                                      目标表:

DataX学习                                               DataX学习

  • 编辑json文件

将源表数据抽取到目标表,

{
    "job": {
        "content": [
            {
                "reader": {
                    "name": "mysqlreader",
                    "parameter": {
                        "username": "root",
                        "password": "xxxxx",
                        "column": ["id","name"],
                        "connection": [
                            {
                                "table": [
                                    "name"
                                ],
                                "jdbcUrl": [
                                    "jdbc:mysql://xxx.xxx.xx.xx:xxxx/xxx"
                                ]
                            }
                        ]
                    }
                },
                "writer": {
                    "name": "mysqlwriter",
                    "parameter": {
                        "username": "root",
                        "password": "xxxxxxxx",
                        "column": [
                            "id",
                            "name"
                        ],
                        "preSql": [
                            "TRUNCATE table name1"
                        ],
                        "connection": [
                            {
                                "jdbcUrl": "jdbc:mysql://xxx.xxx.xx.xx:xxxx/xxx",
                                "table": [
                                    "name1"
                                ]
                            }
                        ]
                    }
                }
            }
        ],
        "setting": {
            "speed": {
                "channel": 1
            }
        }
    }
}
  • 执行

进入命令行  win + r  ,切换至  解压 datax 源码 目录下

DataX学习

执行命令为  : 

python bin/datax.job json文件路径

 结果:

DataX学习

已经成功了。

上一篇:DataX


下一篇:sql中is和=的区别