首页
学习
活动
专区
圈层
工具
发布

使用shell脚本批量插入数据到MySQL中

经常会踫到这样的场景需求:批量向MySQL数据库插入数据,显然手工INSERT成千上万条数据是不现实的,所以自己写了这个shell脚本来处理。...1 具体需求 shell脚本批量插入10万条数据到MySQL中,其中对应表唯一索引是用户uid。因此在程序循环1万次数时,每次都使uid自增1就行了。.../bin/bash # FileName: batchinsertmysqlshell1.sh # Description: 使用shell脚本批量插入数据到MySQL中 # Simple.../batchinsertmysqlshell1.sh # mysql db name. db_name="gamedata" # mysql table name. table_name="test_user_skin...====" 3 脚本管理 目前已经把这个脚本放在Github了,地址是https://github.com/vfhky/shell-tools,以后脚本的更新或者更多好用的脚本也都会加入到这个工程中。

2.9K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MySQL中插入语句(Insert)的几种使用方式

    1.INSERT 简写方式插入数据(不推荐) 先看一下表中有那些数据 ? 使用Inset into 表名 values(值1,值2)进行插入,并对查看插入数据是否成功 ?...,但是使用这种方式必须赋值为null 不推荐的原因:在实际开发中如果使用此方法进行插入数据,后面表进行了改动(比如字段顺序改变了)那么整个语句都将报错,扩展性及其差,且维护起来比较困难。...推荐使用的原因**:这一次我们设置了没有给id赋任何值包括null,而且不用关心表中字段的顺序,比如下面不按照正常顺序添加,我们将age放在第一,name放在第二个.也能添加成功;需要注意的是表名后面的字段名必须和后面...使用简写方式使用Inset into 表名(字段1,字段2,字段3) values(值1,值2,值3),(值1,值2,值3)进行插入,并对查看插入数据是否成功,必须保证values后的值都和字段相对应。...6.INSERT SELECT语句 1.此语句的作用是将SELECT语句的结果插入表中,可实现数据迁移。

    3.9K30

    使用 MySQLi 和 PDO 向 MySQL 插入数据

    使用 MySQLi 和 PDO 向 MySQL 插入数据 在创建完数据库和表后,我们可以向表中添加数据。...以下为一些语法规则: PHP 中 SQL 查询语句必须使用引号 在 SQL 查询语句中的字符串值必须加引号 数值的值不需要引号 NULL 值不需要引号 INSERT INTO 语句通常用于向 MySQL...在前面的几个章节中我们已经创建了表 "MyGuests",表字段有: "id", "firstname", "lastname", "email" 和 "reg_date"。...注意: 如果列设置 AUTO_INCREMENT (如 "id" 列) 或 TIMESTAMP (如 "reg_date" 列),,我们就不需要在 SQL 查询语句中指定值; MySQL 会自动为该列添加值...INTO MyGuests (firstname, lastname, email) VALUES ('John', 'Doe', 'john@example.com')"; // 使用

    3.1K20

    解决wampServer 中MySQL插入中文乱码问题

    大家在使用wampserver中的mysql数据库时,插入中文会显示“??”,很多小伙伴都不知道给如何做,明明在创建数据库和表时已经设置字符为UTF-8了,可插入结果还是乱码。...我们大家都知道在使用MySQL数据库时,我们对其插入一些中文字符的实际操作过程中经常会出现乱码,中文全被用?代替。 出现这种情况的原因,多是字符集不匹配造成的。...在MySQL中,如果使用缺省的字符集,在建库、建表时,默认使用的是latin1字符集,为ISO 8859-1西欧字符集。 插入中文字符时,与之不匹配,就会出现乱码。...本人使用的是MySQL 5.0版,并用C#操作MYSQL数据库,当插入中文字符时,发现显示的是乱码。 初步估计是字符集没有配对。...查找后,发现MSYQL默认使用的是latin1,因此将数据库的配置文件中的字符设置改为utf8,并在C#中将中文字符,转为utf8,插入后,仍为乱码。

    3.8K20

    使用insert () 在MongoDB中插入数组

    “insert”命令也可以一次将多个文档插入到集合中。下面我们操作如何一次插入多个文档。...我们完成如下步骤即可: 1)创建一个名为myEmployee 的JavaScript变量来保存文档数组; 2)将具有字段名称和值的所需文档添加到变量; 3)使用insert命令将文档数组插入集合中...结果显示这3个文档已添加到集合中。 以JSON格式打印 JSON是一种称为JavaScript Object Notation的格式,是一种规律存储信息,易于阅读的格式。...在如下的例子中,我们将使用JSON格式查看输出。 让我们看一个以JSON格式打印的示例 db.Employee.find()。...这样做是为了确保明确浏览集合中的每个文档。这样,您就可以更好地控制集合中每个文档的处理方式。 第二个更改是将printjson命令放入forEach语句。这将导致集合中的每个文档以JSON格式显示。

    11.8K20

    MySQL中 enum 插入的时候注意事项

    导入完成后,使用select查询后,发现大量数据未成功插入。 后来发现是enum字段没有加引号搞的鬼。 结论:    enum的字段,在插入的时候,必须带上引号。否则会出现不可预期的问题。...如果不带引号插入的话,实际上是插入的key(如上面的例子中 INSERT INTO t1 (b) VALUES (4),插入的是b列第四个default值,也就是取enum('4','3','2','1...ENUM枚举     一般不建议使用,后期不便于扩展。任何不在枚举的范围的值插入都会报错,一般用tinyint替代ENUM比较合适。      ENUM的字段值不区分大小写。...utm_source=tuicool&utm_medium=referral) 在建立enum类型的字段时,我们会给他规定一个范围比如 enum('a','b','c'),这时mysql内部会建立一张hash...同样,enum在mysql手册上的说明: ENUM('value1','value2',...) 1或2个字节,取决于枚举值的个数(最多65,535个值) 除非enum的个数超过了一定数量,否则他所占的存储空间也总是

    1.7K31

    MySQL 中将使用逗号分隔的字段转换为多行数据

    在我们的实际开发中,经常需要存储一些字段,它们使用像, - 等连接符进行连接。在查询过程中,有时需要将这些字段使用连接符分割,然后查询多条数据。...以前,为了方便配置,配置人员直接将多个页面使用逗号连接后保存,就像是将page1, page2, page3等直接存储在了该字段中。...在上线时,我们需要将已有的pages字段中配置历史数据的页面值使用逗号进行分割,并存入新的表中,然后废弃掉工单信息表中的pages字段。...我们使用了mysql 的help_topic表,这个表存储的是各种注释、地址等帮助信息,内容如下: 这个表有一个特性,就是它有从0开始自增为1的id属性--help_topic_id 并且 拥有固定数量...当需要对包含多个字段连接符的数据进行查询与迁移时,可以使用SQL中的SUBSTRING_INDEX函数结合一些辅助表的特性进行数据分割和迁移。

    5.6K10

    如何使用Hutool插入图片到Excel中?

    随着办公自动化的发展,越来越多的企业和个人开始使用Excel进行数据分析和处理。在Excel中,除了可以插入文字和数字之外,还可以插入图片,这为我们展示数据、制作报表等提供了更加丰富的方式。...但是,在Excel中插入图片并不是一件很容易的事情,需要借助于一些工具来实现。本文将介绍如何使用Hutool插入图片到Excel中,并给出详细的代码示例。...使用Hutool插入图片到Excel的方法Hutool提供了非常方便的API,可以帮助我们将图片插入到Excel中。具体步骤如下:1. 创建Excel对象首先,我们需要创建一个Excel对象。...(tempFileName);总结在这篇文章中,我们介绍了如何使用Hutool插入图片到Excel中。...具体步骤包括创建Excel对象、创建Sheet并写入数据、插入图片和保存Excel文件。通过使用Hutool的API,我们可以非常方便地实现在Excel中插入图片的功能。

    6.2K30

    Python打包GUI界面组件汇总,Tkinter(TK)实例代码

    Tkinter是python自带的gui界面工具,作为非常强大的内置库tkinter,利用它可以很轻松做出一些简易的UI界面,Tkinter中给我们提供了15种控件供大家使用。...Tkinter优缺点: 历史最悠久, Python 事实上的标准 GUI , Python 中使用 Tk GUI 工具集的标准接口,已经包括在标准的 Python Windows 安 装中,著名的 IDLE...就是使用 Tkinter 实现 GUI 的创建的 GUI 简单,学起来和用起来也简单。...t_show.pack(side="bottom") #多行文本框在窗体底对齐设置(4) # ============================================= Checkbutton...onvalue="RGB",offvalue="L",fg="blue") #创建带蓝色标题的复选框 c_show.pack(side="top") #复选框在窗体顶端对齐设置 # =========

    10K21

    mysql创建临时表,将查询结果插入已有表中

    我记得学数据库理论课老师说可以创建临时表,不知道mysql有没有这样的功能呢?临时表在内存之中,读取速度应该比视图快一些。然后还需要将查询的结果存储到临时表中。...下面是创建临时表以及插入数据的例子,以供大家参考。...A、临时表再断开于mysql的连接后系统会自动删除临时表中的数据,但是这只限于用下面语句建立的表: 1)定义字段   CREATE TEMPORARY TABLE tmp_table (      ...2)直接将查询结果导入临时表   CREATE TEMPORARY TABLE tmp_table SELECT * FROM table_name B、另外mysql也允许你在内存中直接创建临时表,...1、可以使用A中第二个方法 2、使用insert into temtable (select a,b,c,d from tablea)”;

    13.9K50

    mysql实现获取自增id插入到其他表中

    现在有这样一个需求,就是我向A表中插入一条数据,id是自增的。...插入之后,还需要向B表中插入一条数据,但是B表中需要保存的数据中要使用刚刚A表自增后的id, 这个其实是一个比较常见的需求,就是两张表之间的一个关联,如果用程序来执行也是很容易实现。...比如我就在用sql执行之后,获取A的id插入到B表中 实现方式如下: insert into A (id,name,code) values (null, "zhagnsan", "zs"); // 注意...A表的id要设置为自增,给null值即可 set @id = @@IDENTITY; // 使用id变量保存刚刚自增生成的id insert into B (id,a_id,name) values...(null, @id, "lisi"); // 使用变量获取A表Id 上面是用自定义变量的形式进行保存的,如果你只是想查一下是多少,可以直接使用: select @@IDENTITY; 好了,如果对你有帮助

    5.8K20
    领券