我有一个由大约263 k行组成的FlatXMLDataSet,我正试图将这些行加载到MySQL数据库中。我有一个小得多的数据集(5k行),它不存在任何问题。大型数据集并不太复杂(名称、地址、电子邮件等)。
我尝试过的:
禁用外键检查
SET FOREIGN_KEY_CHECKS=0;设置批处理大小
dbUnitConnection.getConfig().setProperty(org.dbunit.database.DatabaseConfig.FEATURE_BATCHED_STATEMENTS, true);
dbUnitConnection.getConfig().setProperty(org.dbunit.database.DatabaseConfig.PROPERTY_BATCH_SIZE, 20000);为什么使用DBUnit将数据插入MySQL/MariaDB的速度如此之慢,是否有任何方法可以加快它的速度?任何帮助/指针都将不胜感激,因为我需要这个来工作。
注:相同的数据集插入到Oracle、Postgres、SQLServer等中,没有问题。
发布于 2019-09-13 15:17:05
感谢乔治的评论,他的评论加速了事态的发展。
解决方案是将MySQL的自动提交设置为false,然后在加载数据后手动提交更改。
jdbcConnection.setAutoCommit(false);
jdbcConnection.commit();这会让它加速一点。为了加快速度,我还必须禁用外键检查(我使用JDBC数据库url变量)
"url:port/schema?useSSL=false&sessionVariables=FOREIGN_KEY_CHECKS=0"https://stackoverflow.com/questions/57902500
复制相似问题