项目开发中,正好遇到这个问题。
将一批从外部第三方接口获取到的数据存储到本地mysql数据库,假设接口返回的数据类型为A,经过A到B的转换规则转换后,
要插入数据库的数据类型为B。那么在A获取到1000条记录,转换为1000条B记录,用mybatis的批量插入语句。
要保证批量插入是否成功的话,就要考虑如果因为部分记录已经存在于数据库的话,批量插入语句是否会全部失败还是部分失败。(比如有唯一索引,那么是违反了唯一约束的失败呢,还是整个批量语句全失败)。
如果是全失败,就可以在1000条A转换为B的时候,先查询记录是否存在,存在则不进行转换,因为转换了的话,最后会导致批量语句失败。
如果是部分失败,就可以全转换,不用考虑本地数据库唯一索引的问题。
先看看测试:
表结构:
索引如下:(有一个唯一索引,字段为rate_date)
数据如下:
好了,开始测试:
1.如果批量语句为插入5号和6号:
insert into `biz_riskfree_interest_rate` (`rate_date`, `period_span`, `rate`) values('20170705','1y','3.4596'),('20170706','1y','3.4596');
没问题。
2.如果批量语句为插入6号和7号:(预期6号会失败,但是7号应该成功,所以结果会不会是6号失败,7号成功呢?)
结果是:都失败了。
3.上面失败了,和顺序有没有关系呢,如果7号放在前面,6号放后面执行呢?
依然失败了。
结论:批量语句,只要有一个失败,就会全部失败。开发程序的时候要注意这点。