首页
学习
活动
专区
圈层
工具
发布

mysql 一对多批量插入

基础概念

MySQL中的“一对多”关系是指一个父表中的记录可以与多个子表中的记录相关联。例如,一个用户可以有多个订单,用户表是父表,订单表是子表。

批量插入的优势

批量插入可以显著提高数据插入的效率,因为它减少了与数据库的交互次数,从而减少了网络延迟和数据库的开销。

类型

批量插入可以分为两种类型:

  1. 单条SQL语句批量插入:使用INSERT INTO ... VALUES (...), (...), ...语法。
  2. 使用存储过程或函数:通过编写存储过程或函数来实现批量插入。

应用场景

批量插入适用于需要一次性插入大量数据的场景,例如:

  • 数据迁移
  • 数据备份
  • 数据初始化

示例代码

单条SQL语句批量插入

假设我们有两个表:users和orders,它们之间是一对多的关系。

代码语言:txt
复制
-- 创建用户表
CREATE TABLE users (
    id INT AUTO_INCREMENT PRIMARY KEY,
    name VARCHAR(255) NOT NULL
);

-- 创建订单表
CREATE TABLE orders (
    id INT AUTO_INCREMENT PRIMARY KEY,
    user_id INT NOT NULL,
    amount DECIMAL(10, 2) NOT NULL,
    FOREIGN KEY (user_id) REFERENCES users(id)
);

-- 批量插入用户
INSERT INTO users (name) VALUES
('Alice'),
('Bob'),
('Charlie');

-- 批量插入订单
INSERT INTO orders (user_id, amount) VALUES
(1, 100.00),
(1, 200.00),
(2, 150.00),
(3, 75.00);

使用存储过程批量插入

代码语言:txt
复制
-- 创建存储过程批量插入用户和订单
DELIMITER //

CREATE PROCEDURE BatchInsertUsersAndOrders()
BEGIN
    DECLARE i INT DEFAULT 1;

    WHILE i <= 3 DO
        INSERT INTO users (name) VALUES (CONCAT('User', i));
        INSERT INTO orders (user_id, amount) VALUES (i, i * 50.00);
        SET i = i + 1;
    END WHILE;
END //

DELIMITER ;

-- 调用存储过程
CALL BatchInsertUsersAndOrders();

常见问题及解决方法

1. 批量插入时遇到主键冲突

原因:主键冲突通常是因为插入的数据中存在重复的主键值。

解决方法:

  • 确保插入的数据中没有重复的主键值。
  • 使用INSERT IGNORE或REPLACE INTO语句来处理冲突。
代码语言:txt
复制
INSERT IGNORE INTO users (name) VALUES ('Alice');

2. 批量插入时遇到外键约束失败

原因:外键约束失败通常是因为插入的数据违反了外键约束。

解决方法:

  • 确保插入的数据符合外键约束。
  • 先插入父表数据,再插入子表数据。
代码语言:txt
复制
INSERT INTO users (name) VALUES ('Alice');
INSERT INTO orders (user_id, amount) VALUES (LAST_INSERT_ID(), 100.00);

3. 批量插入时性能问题

原因:批量插入时性能问题可能是由于数据量过大或数据库配置不当。

解决方法:

  • 使用事务来提高批量插入的性能。
  • 调整数据库配置,如增加缓冲区大小、调整日志文件大小等。
代码语言:txt
复制
START TRANSACTION;

INSERT INTO users (name) VALUES ('Alice');
INSERT INTO orders (user_id, amount) VALUES (LAST_INSERT_ID(), 100.00);

COMMIT;

参考链接

希望这些信息对你有所帮助!

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

  • MySQL 批量插入:如何不插入重复数据?

    知识这个东西,看来真的要温故而知新,一直不用,都要忘记了 业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了mysql...item.username}, #{item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。 来源:www.telami.cn

    5.5K20

    Mysql批量插入分析【面试+工作】

    前言 最近发现几个项目中都有批次插入数据库的功能,每个项目中批次插入的写法有一些差别,所以本文打算对Mysql的批次插入做一个详细的分析。...准备 1.jdk1.7,mysql5.6.38 2.准备库和表 ? 测试与分析 下面准备几种插入的方式来分析优劣: 1.Statement插入方式 ?...准备数据,然后通过Statement方式插入数据,插入10000条数据大概在6秒多左右,同时可以监控服务器数据包; 监控命令: ? 日志如下: ?...同样插入10000条数据,时间大概在5秒多左右,比起Statement有一定优势,但是不明显;PreparedStatement使用的是批次提交,速度不应该这么查,同样观察日志: ?...此方式可以很好的执行批量数据的插入,但是如果数据量很大,一下执行所有数据的批次插入,很容易造成客户端内存的溢出,所以也可以使用第三种方式; 3.PreparedStatement分批次方式 部分代码如下

    2.4K20

    Mysql批量插入时,如何不插入重复的数据

    业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了mysql...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

    6.8K21

    【MySQL】插入优化篇——(少量插入数据优化&批量插入数据load指令)

    前言 大家好吖,欢迎来到 YY 滴MySQL系列 ,热烈欢迎!...本章主要内容面向接触过C++ Linux的老铁 主要内容含: 1.批量插入 采取以下形式,在一个insert语句中完成数据插入,而不是分成几个insert语句 Insert into tb test...values(1,'Tom'),(2,'cat'),(3, jerry'); 【1】需要大批量插入数据——load指令 如果一次性需要插入大批量数据,使用insert语句插入性能较低,此时可以使用MVSQL...本地磁盘文件中的数据,通过load直接加载到数据库表结构中 操作如下: #客户端连接服务端时,加上参数--local-infile mysql --local-infile -u root -p #设置全局参数...批量处理:对于大量的插入操作,将它们封装在一个事务中可以显著提高性能,因为数据库只需在事务结束时进行一次磁盘写入操作,而不是每次插入都写入。

    2.2K10

    Mybatis批量插入与存储过程批量插入

    前言在数据库操作中,批量插入是一个常见的性能优化手段,特别是在需要插入大量数据时。Mybatis作为一款优秀的持久层框架,提供了多种批量插入数据的方式。...除了传统的Mybatis映射文件中的批量插入外,还可以利用存储过程来实现批量插入。本文就来讲解一下Mybatis常用的几种批量插入方式,以及重点介绍存储过程插入。1....Mybatis传统批量插入Mybatis中可以通过在Mapper XML文件中编写批量插入的SQL语句,并在Java代码中通过List或数组的形式传递参数来实现批量插入。...这种方式需要确保SQL语句支持批量插入,并且需要在Mybatis的配置文件中启用批量操作。...使用存储过程进行批量插入可以减少与数据库的交互次数,提高性能。在上面的示例中,你已经展示了如何使用存储过程来批量插入数据。

    2.1K10

    面试官:MySQL 批量插入,如何不插入重复数据?

    业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入。 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。 如何提高效率? 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了MySQL...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。 —END—

    2.1K20

    MySQL批量插入测试数据的几种方式

    在开发过程中我们不管是用来测试性能还是在生产环境中页面展示好看一点, 又或者学习验证某一知识点经常需要一些测试数据, 这个时候如果手敲的话, 十行二十行还好, 多了就很死亡了, 接下来介绍两种常用的MySQL...测试数据批量生成方式 存储方式+函数 Navicat的数据生成 一、表 准备了两张表 角色表: id: 自增长 role_name: 随机字符串, 不允许重复 orders: 1-1000任意数字...NULL COMMENT '排序权重\r\n', PRIMARY KEY (`id`) ) ENGINE=InnoDB DEFAULT CHARSET=latin1; 二、使用函数生成 通过存储过程快速插入..., 通过函数保证数据不重复 设置允许创建函数 查看 MySQL是否允许创建函数 SHOW VARIABLES LIKE 'log_bin_trust_function_creators'; 结果如图所示...-- 插入用户数据 DELIMITER $$ CREATE PROCEDURE insert_user(START INT, max_num INT) BEGIN DECLARE i INT

    1.2K10

    MySQL批量插入数据,一次插入多少行数据效率最高?

    假如需要插入的数据有百万条,那么一次批量插入多少条的时候,效率会高一些呢?这里博主和大家一起探讨下这个问题,应用环境为批量插入数据到临时表。...单条sql的话,会在链接,解析部分耗费大量的时间,因此速度会很慢,所以我们一般都是采用批量插入的操作,争取在一次链接里面写入尽可能多的数据,以此来提升插入的速度。但是这个尽可能多的数据是多少呢?...一次到底插入多少才合适呢? 三、批量插入数据测试 开始测试,但是一开始插入多少是合适的呢,是否有上限?查询mysql手册,我们知道sql语句是有大小限制的。...插入数据量多,减少了循环的次数,也就是在数据库链接部分的耗时有所减少,只是这个8W并不是极限数据,具体一次插入多少条,还有待参考。...这部分我的理解是mysql是要分配一定的内存给传过来的数据包使用,当批量插入的数据量到达一定程度之后,一次插入操作的开销就很耗费内存了。

    10.8K30
    领券