首页
学习
活动
专区
圈层
工具
发布

mysql 存储过程批量插入数据

基础概念

MySQL 存储过程(Stored Procedure)是一种在 MySQL 数据库中存储和编译的 SQL 代码块,可以通过调用执行。存储过程可以简化复杂的 SQL 逻辑,提高代码的重用性和执行效率。

批量插入数据是指一次性插入多条记录到数据库表中,相比于逐条插入,批量插入可以显著提高数据插入的性能。

相关优势

  1. 简化代码:存储过程可以将复杂的 SQL 逻辑封装起来,使得调用者只需执行一个简单的调用命令。
  2. 提高性能:批量插入数据可以减少与数据库的交互次数,从而提高数据插入的效率。
  3. 增强安全性:存储过程可以设置权限,限制对数据库的操作,提高数据的安全性。

类型

MySQL 存储过程可以分为以下几种类型:

  1. 无参数存储过程:不需要传递任何参数。
  2. 带输入参数的存储过程:可以传递输入参数。
  3. 带输出参数的存储过程:可以返回输出参数。
  4. 带输入输出参数的存储过程:既可以传递输入参数,也可以返回输出参数。

应用场景

存储过程常用于以下场景:

  1. 复杂的数据操作:如批量插入、更新、删除等。
  2. 业务逻辑封装:将业务逻辑封装在存储过程中,简化应用程序代码。
  3. 数据验证和处理:在插入或更新数据之前进行数据验证和处理。

示例代码

以下是一个使用 MySQL 存储过程批量插入数据的示例:

创建存储过程

代码语言:txt
复制
DELIMITER $$

CREATE PROCEDURE BatchInsertData(IN tableName VARCHAR(255), IN data JSON)
BEGIN
    DECLARE i INT DEFAULT 0;
    DECLARE rowCount INT;
    DECLARE columns VARCHAR(255);
    DECLARE values VARCHAR(255);
    DECLARE sqlQuery VARCHAR(1000);

    SET rowCount = JSON_LENGTH(data);
    SET columns = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].columns')));
    SET values = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].values')));

    SET sqlQuery = CONCAT('INSERT INTO ', tableName, ' (', columns, ') VALUES (', values, ')');

    WHILE i < rowCount DO
        SET i = i + 1;
        SET columns = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].columns')));
        SET values = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].values')));
        SET sqlQuery = CONCAT(sqlQuery, '; INSERT INTO ', tableName, ' (', columns, ') VALUES (', values, ')');
    END WHILE;

    PREPARE stmt FROM sqlQuery;
    EXECUTE stmt;
    DEALLOCATE PREPARE stmt;
END$$

DELIMITER ;

调用存储过程

代码语言:txt
复制
CALL BatchInsertData('your_table_name', '[{"columns": "column1, column2", "values": "value1, value2"}, {"columns": "column1, column2", "values": "value3, value4"}]');

常见问题及解决方法

问题1:存储过程创建失败

原因:可能是语法错误、权限不足或表不存在。

解决方法:

  1. 检查存储过程的语法是否正确。
  2. 确保有足够的权限创建存储过程。
  3. 确保表存在并且有正确的权限。

问题2:批量插入数据失败

原因:可能是数据格式不正确、表结构不匹配或存储过程逻辑错误。

解决方法:

  1. 检查传递给存储过程的数据格式是否正确。
  2. 确保表结构与存储过程中使用的列匹配。
  3. 调试存储过程逻辑,确保每一步都正确执行。

参考链接

希望以上信息对你有所帮助!如果有更多问题,请随时提问。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

Mybatis批量插入与存储过程批量插入

除了传统的Mybatis映射文件中的批量插入外,还可以利用存储过程来实现批量插入。本文就来讲解一下Mybatis常用的几种批量插入方式,以及重点介绍存储过程插入。1....这种方式比较适合数据量小的情况。2. 利用存储过程批量插入存储过程接下来重点介绍利用存储过程批量插入。...存储过程是存储在数据库中的一组为了完成特定功能的SQL语句集,用户通过指定存储过程的名字和参数(如果有)来调用并执行它。使用存储过程进行批量插入可以减少与数据库的交互次数,提高性能。...在上面的示例中,你已经展示了如何使用存储过程来批量插入数据。存储过程idata和proc_initData分别用于向表t2和oms_order中插入数据。...在存储过程中,你可以使用循环结构(如WHILE循环)来迭代插入数据。这种方法适用于需要动态生成数据或者需要基于某种条件插入数据的情况。

2.1K10
  • Mysql--批量插入数据脚本

    批量插入数据脚本 前置知识 创建一个随机产生字符串的函数rand_string(int); 创建一个随机产生一个数字的函数rand_num() 创建存储过程 调用存储过程 ---- 前置知识 CEILING...FLOOR 函数返回小于或等于所给数字表达式的最大整数 FLOOR 和 CEILING 返回值的数据类型都与输入的数字表达式的数据类型相同。...100+RAND()*10); RETURN i; END $$ 如果要删除这个自定义函数: drop function rand_num; //function后面加要删除的自定义函数名 ---- 创建存储过程...payment (id, `serial`) VALUES (i,rand_string(6)); UNTIL i = max_num END REPEAT; COMMIT; END $$ ---- 调用存储过程...DELIMITER ; //切换为;结束sql语句 CALL insert_crownsize(100001,10);//调用自定义存储过程,这里一次提交为10条

    3.9K20

    MySQL 批量插入:如何不插入重复数据?

    知识这个东西,看来真的要温故而知新,一直不用,都要忘记了 业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了mysql...item.username}, #{item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。 来源:www.telami.cn

    5.5K20

    【MySQL】插入优化篇——(少量插入数据优化&批量插入数据load指令)

    前言 大家好吖,欢迎来到 YY 滴MySQL系列 ,热烈欢迎!...本章主要内容面向接触过C++ Linux的老铁 主要内容含: 1.批量插入 采取以下形式,在一个insert语句中完成数据插入,而不是分成几个insert语句 Insert into tb test...values(1,'Tom'),(2,'cat'),(3, jerry'); 【1】需要大批量插入数据——load指令 如果一次性需要插入大批量数据,使用insert语句插入性能较低,此时可以使用MVSQL...本地磁盘文件中的数据,通过load直接加载到数据库表结构中 操作如下: #客户端连接服务端时,加上参数--local-infile mysql --local-infile -u root -p #设置全局参数...批量处理:对于大量的插入操作,将它们封装在一个事务中可以显著提高性能,因为数据库只需在事务结束时进行一次磁盘写入操作,而不是每次插入都写入。

    2.2K10

    Mysql批量插入时,如何不插入重复的数据

    业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了mysql...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

    6.8K21

    MySql批量插入时,如何不插入重复的数据

    业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...几百万的数据,不可能查出来,做去重处理 说一下我Google到的解决方案 1、insert ignore into 当插入数据时,如出现错误时,如重复数据,将不返回错误,只以警告形式返回。...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

    4.3K20

    MySql 批量插入时,如何不插入重复的数据

    :需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...几百万的数据,不可能查出来,做去重处理 说一下我Google到的解决方案 1、insert ignore into 当插入数据时,如出现错误时,如重复数据,将不返回错误,只以警告形式返回。...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

    4.7K20

    面试官:MySQL 批量插入,如何不插入重复数据?

    业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入。 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。 如何提高效率? 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了MySQL...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。 —END—

    2.1K20

    MySQL批量插入数据,一次插入多少行数据效率最高?

    一、前言 我们在操作大型数据表或者日志文件的时候经常会需要写入数据到数据库,那么最合适的方案就是数据库的批量插入。只是我们在执行批量操作的时候,一次插入多少数据才合适呢?...假如需要插入的数据有百万条,那么一次批量插入多少条的时候,效率会高一些呢?这里博主和大家一起探讨下这个问题,应用环境为批量插入数据到临时表。...2、计算一行字段占用的空间 对于innodb引擎来说,int类型可以存储4个字节,里面的Int(M)并不会影响存储字节的大小,这个M只是数据的展示位数,和mysql的ZEROFILL属性有关...一次到底插入多少才合适呢? 三、批量插入数据测试 开始测试,但是一开始插入多少是合适的呢,是否有上限?查询mysql手册,我们知道sql语句是有大小限制的。...这部分我的理解是mysql是要分配一定的内存给传过来的数据包使用,当批量插入的数据量到达一定程度之后,一次插入操作的开销就很耗费内存了。

    10.9K30

    Mysql数据库-存储过程

    Mysql数据库-存储过程 1. 存储过程和函数概述 1. 存储过程和函数是事先经过编译并存储在数据库中的一段SQL语句的集合 a. 类似于java中的方法: 是一段java代码的集合 b....end$ delimiter ; -- 修改结束分隔符为; -- 调用存储过程 call 存储过程名称(实际参数) ; 2.2 实例: 2.2.1 准备数据 -- 准备数据 create database...查看和删除存储过程 3.1 语法: -- 查询数据库中所有的存储过程 select * from mysql.proc where db='数据库名称'; -- 删除存储过程 drop procedure...[if exists] 存储过程名称; 3.2 实例: -- 查询数据库中所有的存储过程 select * from mysql.proc where db='db2'; -- 删除存储过程 drop...procedure if exists stu_group; 执行如下: -- 查询数据库 db2 中所有的存储过程 mysql> select * from mysql.proc where db

    12.9K10
    领券