DTS同步DDL的策略

2023-10-12 14:15:10

DTS增量迁移/同步在同步源库的DML操作到目标库时是并发执行的,而同步DDL操作则是串行执行的,其主要过程如下:

(1).解析ddl涉及到的库表列,如果该ddl涉及到的库表列都不在迁移或者同步列表中则过滤该ddl,否则执行该ddl;
(2).根据目标库的类型及配置的库表列映射信息转换该ddl;
(3).串行执行该ddl(在执行该ddl之前先等待它之前的所有dml/ddl操作都执行完了,阻塞该ddl之后的所有dml/ddl操作);
(4).如果ddl在目标库执行失败则忽略该错误;
(5).ddl执行之后清空目标表结构信息缓存;

从DDL的同步过程可以看出在DDL比较频繁的情况下会严重影响DTS的迁移/同步性能.在正常情况下,真正的线上业务其DDL操作不可能频繁的,但也不排除一些特殊情况,如果这种情况下的频繁DDL导致DTS的性能问题,就需要业务改造了.

一.常见场景

(1).对同一张表频繁地create table if not exists `xxx`.`xxx`;
(2).对同一张表频繁地create table `xxx`.`xxx`;drop table `xxx`.`xxx`;
(3).频繁地truncate table `xxx`.`xxx`;