状态机的推进靠定时任务扫日期边界,扫的是"未来 N 天内将跨界的行",不是全表扫描;跨界当天再触发一次业务侧通知(准入复核、证照更新提醒)。...要支撑"当时依据什么做的判断",还需要两样东西:版本号单调递增,同一主体同一类型下递增,不做全局递增(全局递增在并发下容易成为热点)。生效时间独立于创建时间。...录入时间不等于生效时间:补录三个月前的旧证,创建时间是今天,生效时间是三个月前,两者混用会让历史查询错位。历史查询的口径要提前定:按生效时间查当时有效的证照,而不是按创建时间查末条记录。...,撤销走事件表 || 版本快照 | 支撑历史查询 | 版本号按主体内递增,生效时间与创建时间分离 || 披露白名单 | 控制字段可见性 | 服务端序列化过滤,按角色 + 场景定义 || 核验记录 | 把核验行为对象化...这四条做到,资质模块在扩品类、加披露场景、接监管核验时都只是加配置和加行,不需要动核心结构。
即使name字段定义为varchar(16),在排序过程中还是按实际长度分配空间。 select @b-@a =4000,整个执行过程只扫描4000行。...MySQL之所以需要生成临时表,并在临时表上做排序,是因为原来的数据都是无序的。 若能保证从city索引上取出来的行,天生就是按name递增排序的,是不是就不用再排序了? 是的!...(city,name)取下一个记录的主键id 重复步骤2、3,直到查到第1000条记录或不满足city='上海’条件时,循环结束 6.2 执行示意图 可见,该查询过程无需临时表,也无需排序。...而且由于(city,name)联合索引本身有序,所以该查询也不用把4000行全都读一遍,只要找到满足条件的前1000条记录即可退出。在这个例子里,只需扫描1000次。...7.1 执行流程 这时,city字段值相同的行,还是按name字段值递增排序,此时的查询语句也就不再需要排序了。
2、按行(列)存储 通过简单示例比较按行存储与按列存储对查询的影响,主要以磁盘IO最为技术指标。测试数据量为千万级别。...区间查询的效率比有限集合查询效率要高,原因如下:区间查询数据存储是连续的,单次数据索引,单页磁盘IO(数据量较小),紧凑的数据查询,按行存储略占优势,考虑到是查询单个字段,因此磁盘数据索引次数均为一次(...按列查询多少列即索引多少次)。...集合查询由于查询条件非连续,需要单独索引并完成磁盘IO,集合中有N个元素(随机)需要索引N次,以页为单位的磁盘IO (3)通过id查询整行数据 按列存储通常比按行存储的查询效率要高,对于宽表(几十列以上的聚合表...2、ReplacingMergeTree ReplacingMergeTree引擎用来去除重复行,此处的去重有三个层次的含义:在分区内去重;以主键字段为比较对象;数据去重实践只会在合并时发生。
取name、city、age三个字段的值,存入sort_buffer 从索引city取下一个记录的主键id 重复3、4,直到city的值不满足查询条件,即主键id_y 对sort_buffer中数据按name...MySQL之所以需要生成临时表,并且在临时表上做排序,是因为原来的数据都是无序的。 如果能保证从city索引上取出来的行,天生就是按name递增排序,是不是就可以不用再排序了?是的。...从索引(city,name)取下一个记录主键id 重复步骤2、3,直到查到第1000条记录,或者是不满足city='上海’条件时循环结束 引入(city,name)联合索引后,查询语句的执行计划 ?...而且由于(city,name)这个联合索引本身有序,所以该查询也不用把4000行全都读一遍,只要找到满足条件的前1000条记录即可退出。在这个例子里,只需扫描1000次。...这时,对于city字段的值相同的行来说,还是按照name字段的值递增排序的,此时的查询语句也就不再需要排序了。
为了说明这个 SQL 查询语句的执行过程,我们先来看一下 city 这个索引的示意图,如下 图2 所示为 city 字段的索引示意图: 从图中可以看到,满足 city='杭州’条件的行,是从 ID_X...重复步骤 2、3,直到查到第 1000 条记录,或者是不满足 city='杭州’条件时循环结束。...也就是说,在我们这个例子里,只需要扫描 1000 次。 既然说到这里了,我们再往前讨论,这个语句的执行流程有没有可能进一步简化呢?...age); 这时,对于 city 字段的值相同的行来说,还是按照 name 字段的值递增排序的,此时的查询语句也就不再需要排序了。...重复执行步骤 2,直到查到第 1000 条记录,或者是不满足 city='杭州’条件时循环结束。
从图中可以看到,满足 city='杭州’条件的行,是从 ID_X 到 ID_(X+N) 的这些记录。 通常情况下,这个语句执行流程如下所示 : 1....重复步骤 2、3,直到查到第 1000 条记录,或者是不满足 city='杭州’条件时循环结束。 如下 图8 所示为 引入 (city,name) 联合索引后,查询语句的执行计划: ?...也就是说,在我们这个例子里,只需要扫描 1000 次。 既然说到这里了,我们再往前讨论,这个语句的执行流程有没有可能进一步简化呢?...age); 这时,对于 city 字段的值相同的行来说,还是按照 name 字段的值递增排序的,此时的查询语句也就不再需要排序了。...重复执行步骤 2,直到查到第 1000 条记录,或者是不满足 city='杭州’条件时循环结束。 如下 图10 所示为引入 (city,name,age) 联合索引后,查询语句的执行流程: ?
重复,指的是结果集中的两行每一列的值都完全一样。如果存在任何一列值不一样,都不算重复。因此,重复不是只看一个列,而是要看一行的所有列。...当SELECT DISTINCT后面跟多个字段时,同样也会做去重(按上面说的重复的定义来判断)。...只不过视频中的数据在同时选择job和ename时,没有job和ename都相同的行,所以看起来像是没有做去重,像是“去重失效了”,实际上并没有失效,只是确实没有重复而已。...,第二个日期)可以返回第一个日期减去第二个日期的天数 NOW()获取当前日期和时间 比较运算符 MySQL IN运算符简介....IN 运算符允许你确定一个指定的值在一组值匹配的任何值或 子查询 。
SIGN(X) //符号函数: 负数返回-1,正数返回1,0返回0 【2】字符串函数 【3】日期和时间函数 【4】聚合函数 count() //返回满足查询(Select)条件的 总和数...1)说明 1.叶节点具有相同的深度,叶节点的指针为空 2.所有索引元素不重复 3.节点中的数据索引从左到右递增排列 2)图示 3)理由 【1】层级依旧会出现很大的情况,如果数据量是1k...总结来说:事务A内部的相同查询语句在不同时刻读出的结果不一致,不符合隔离性 幻读(Phantom Reads) 一个事务按相同的查询条件重新读取以前检索过的数据,却发现其他事务插入了满足其查询条件的新数据...【5】当事务开启,执行任何查询sql时会生成当前事务的一致性视图read-view,该视图在事务结束之前都不会变化【这里指在可重复读隔离级别下】(如果是读已提交隔离级别在每次执行查询sql时都会重新生成...)标记位写上true,来表示当前记录已经被删除,在查询时按照上面的规则查到对应的记录如果delete_flag标记位为true,意味着记录已被删除,则不返回数据。
参考博客1中介绍了三种在MySQL中避免重复插入记录的方法,本文将在简单介绍这三种用法的基础上,深入分析这其各自存在的问题,最后给出在实际生产环境中对该业务场景的最佳实践。...; 当因为对于主键或唯一关键字出现重复关键字错误而造成插入失败时,从表中删除含有重复关键字值的(所有)冲突行 ; 再次尝试把新行插入到表中 。...同样的,auto_increment也发生了递增: 3.2 实现机制 其实现运行步骤如下: 尝试把新行插入到表中 ; 当因为对于主键或唯一关键字出现重复关键字错误而造成插入失败时,则对现有的行加上S...X锁,由于T2有该记录的S锁,需要等待其释放 update该记录的值 6 申请该记录的X锁,由于T1有该记录的S锁,需要等待其释放 7 发生死锁 发生死锁 最后,关于“数据表存在多个唯一键时更新记录不确定...从这个角度来说,主从不一致问题并非这三个方案所特有,需要一种统一的机制来解决(比如当主库的auto_increment字段变更时同步到从库,或者在主从切换时先手动同步一次auto_increment值)
依据共享锁和排他锁的特性,我们可以得出两者之间的兼容性列表: 兼用性 X 锁 S 锁 X 锁 不兼容 不兼容 S 锁 不兼容 兼容 按锁的粒度分类 在MySQL中,根据数据所在的维度,...意向排他锁(IX Lock):当事务想要获取一张表中某几行的行级排他锁(X锁)时,MySQL会先自动获取该表的意向排他锁。 首先,我们要理解MySQL中的行锁和表锁为什么不能共存,怎样才能共存?...自增锁 我们在创建表时,ID这一列通常会声明 AUTO_INCREMENT属性,表示该列是自动递增的。之后我们在进行插入时,可以不用指定ID列的值,MySQL会自动且递增的给该列赋值。...对于MySQL提供的这一功能,我们应该会有如下一些疑问: 自增的值保存在什么地方? 一定能保证连续递增吗,会不会出现不连续情况? 自增是如何实现的,如何保证值不会重复? 自增的值保存在什么地方?...下一次再进行插入时,获取到的自增列的值和数据库中已经存在的自增列的值就会不连续。因为上一次的事务插入的行因为失败回滚了。 为什么在事务回滚时,不一起把自增列的值一起回退了。
本章节我们将向大家介绍如何使用 MySQL 的 JOIN 在两个或多个表中查询数据。 你可以在 SELECT, UPDATE 和 DELETE 语句中使用 Mysql 的 JOIN 来联合多表查询。...MySQL 临时表 MySQL 临时表在我们需要保存一些临时数据时是非常有用的临时表只在当前连接可见,当关闭连接时,Mysql会自动删除表并释放所有空间。...一般情况下,查询重复的值,请执行以下操作: 确定哪一列包含的值可能会重复。 在列选择列表使用COUNT(*)列出的那些列。 在GROUP BY子句中列出的列。 HAVING子句设置重复数大于1。...过滤重复数据 # 如果你需要读取不重复的数据可以在 SELECT 语句中使用 DISTINCT 关键字来过滤重复数据。...-l or -lock-tables 数据被插入之前锁住表,这样就防止了, 你在更新数据库时,用户的查询和更新受到影响。
使用Mysql查询浏览器支持管理 6、如何区分FLOAT和DOUBLE? 以下是FLOAT和DOUBLE的区别: 浮点数以8位精度存储在FLOAT中,并且有四个字节。...每当行被更改时,时间戳字段将获取当前时间戳。 25、列设置为AUTO INCREMENT时,如果在表中达到最大值,会发生什么情况? 它会停止递增,任何进一步的插入都将产生错误,因为密钥已被使用。...在SELECT语句的列比较中使用=,, =,>,>,,AND,OR或LIKE运算符。 31、我们如何得到受查询影响的行数?...43、如何显示前50行? 在Mysql中,使用以下代码查询显示前50行: SELECT*FROM LIMIT 0,50; 44、可以使用多少列创建索引? 任何标准表最多可以创建16个索引列。...FORMAT(X, D)- 格式化数字X到D有效数字。 CURRDATE(), CURRTIME()- 返回当前日期或时间。 NOW() - 将当前日期和时间作为一个值返回。
1.插入查询结果 MySQL中insert into ... select ...语句用于将select的查询结果插入到目标表中。...常用于统计记录数量 语法示例:统计exam表中有多少条记录 注意: 统计某一列的行数时,不统计null所在的行;统计所有列的行数时,null所在的行也会被统计 2.2 sum 描述:计算数值列的总和...如果字符串以数字开头,MySQL会将其转换为对应的数值;否则,转换为0 123abc转换为123 abc123转换为0 日期和时间类型(如date,datetime,timestamp):MySQL会将日期和时间转换为自...适用于数值、日期或字符串类型 语法示例1(数值):查看英语成绩的最低分 语法示例2(字符串) 语法示例3(日期) 注意:MySQL对字符的排序是基于字符集的校对规则(collation),所以...适用于数值、日期或字符串类型(计算规则和min()函数同理) 语法示例:查看英语成绩的最高分 3.分组查询(group by) 3.1 概念 分组查询(group by):用于将查询结果按照一个或多个列进行分组
·使用MySQL查询浏览器支持管理 6、如何区分FLOAT和DOUBLE? 以下是FLOAT和DOUBLE的区别: ·浮点数以8位精度存储在FLOAT中,并且有四个字节。...9、在MySQL中ENUM的用法是什么? ENUM是一个字符串对象,用于指定一组预定义的值,并可在创建表时使用。 ...它会停止递增,任何进一步的插入都将产生错误,因为密钥已被使用。 26、怎样才能找出最后一次插入时分配了哪个自动增量? ...43、如何显示前50行? 在MySql中,使用以下代码查询显示前50行: SELECT*FROM LIMIT 0,50; 44、可以使用多少列创建索引? ...·FORMAT(X, D)- 格式化数字X到D有效数字。 ·CURRDATE(), CURRTIME()- 返回当前日期或时间。 ·NOW() - 将当前日期和时间作为一个值返回。
1、CHAR 和 VARCHAR 类型在存储和检索方面有所不同 2、CHAR 列长度固定为创建表时声明的长度, 长度值范围是 1 到 255 当 CHAR 值被存储时, 它们被用空格填充到特定长度,...在 MySQL 中, 使用以下代码查询显示前 50 行: SELECT*FROM TABLE LIMIT 0,50; 17、可以使用多少列创建索引? 任何标准表最多可以创建 16 个索引列。...2、FORMAT(X, D)- 格式化数字 X 到 D 有效数字。 3、CURRDATE(), CURRTIME()- 返回当前日期或时间。...图片 56、TIMESTAMP 在 UPDATE CURRENT_TIMESTAMP 数据类型上做什么? 创建表时 TIMESTAMP 列用 Zero 更新。...每当行被更改时,时间戳字段将获取当前时间戳。 65、列设置为 AUTO INCREMENT 时,如果在表中达到最大值,会发生什么情况? 它会停止递增,任何进一步的插入都将产生错误,因为密钥已被使用。
,尤其是针对时间范围查询时。...BEFORE INSERT ON table_name FOR EACH ROW BEGIN SET NEW.date_created = NOW(); END; 注释:TRIGGERS可用于在特定事件发生时自动执行一些操作...17、利用IGNORE选项忽略插入数据中的重复值。...INSERT IGNORE INTO table_name (id, name) VALUES (1, '张三'), (1, '李四'); 注释:当插入数据中有重复值时,使用IGNORE选项可以忽略重复值而继续插入其他数据...,方便日期显示和处理。
解释 id id代表select查询的序列号,包含一组数字,表示查询中执行select子句或操作表的顺序 ,有以下三种情况: id相同,执行顺序由上至下 id不同,如果是子查询,id的序号会递增,id值越大优先级越高...type所显示的是查询使用了哪种类型,type包含的类型包括如下图所示的几种: system 表只有一行记录(等于系统表),这是const类型的特列,平时不会出现,这个也可以忽略不计 const 表示通过索引一次就找到了...我们都知道,索引尽量建立在重复值很少的列上就是基于这个原因。...使用null和任何数值去做比较判断,得到的都是false;只能使用is null和is not null进行操作; 3. datetime的使用 mysql进行日期比较时,日期格式必须是标准的YYYY-MM-DD...(或MOD(X,0)),则产生错误(否则为警告)。
覆盖索引指的是在一次查询中,如果一个索引包含或者说覆盖所有需要查询的字段的值,我们就称之为覆盖索引,而不再需要回表查询。...read commit 读已提交,两次读取结果不一致,叫做不可重复读。 不可重复读解决了脏读的问题,他只会读取已经提交的事务。...用户开启事务读取 id=1 用户,查询到 age=10,再次读取发现结果 = 20,在同一个事务里同一个查询读取到不同的结果叫做不可重复读。...每当行被更改时,时间戳字段将获取当前时间戳。 19.列设置为AUTO INCREMENT时,如果在表中达到最大值,会发生什么情况? 它会停止递增,任何进一步的插入都将产生错误,因为密钥已被使用。...FORMAT(X, D)- 格式化数字X到D有效数字。 CURRDATE(), CURRTIME()- 返回当前日期或时间。 NOW() – 将当前日期和时间作为一个值返回。
**可重复读**是指,一个事务执行过程中看到的数据,总是跟这个事务在启动时看到的数据是一致的。当然在可重复读隔离级别下,未提交变更对其他事务也是不可见的。...它是在事务开始的时候向 InnoDB 的事务系统申请的,是按申请顺序严格递增的。而每行数据也都是有多个版本的。...此情况仅会发生在: 读未提交的的隔离级别不可重复读在一个事务A中多次操作数据,在事务操作过程中(未最终提交),事务B也才做了处理,并且该值发生了改变,这时候就会导致A在事务操作的时候,发现数据与第一次不一样了...就是不可重复读。此情况仅会发生在:读未提交、读提交的隔离级别.**幻读**一个事务按相同的查询条件重新读取以前检索过的数据,却发现其他事务插入了满足其查询条件的新数据,这种现象就称为幻读。...后提交,这时如果 T1 再次通过条件 1 查询,则会出现在一个事务内,两次按同一条件查询的结果却不一样的情况。
当你运行MySQL服务器时,实际上是在启动mysqld进程。...5个员工信息,对查询的结果按年龄升序排序,年龄相同按入职时间升序排序。...(其他事务已提交)【针对同一行记录】幻读(phantom read) 一个事务按照条件查询数据时,没有对应的数据行,但是在插入数据时,又发现这行数据已经存在,好像出现了“幻影”【...具体是指,一个事务在前后两次查询同一个范围的时候,后一次查询看到了前一次查询没有看到的行。最经典的是插入的情况。假如现在有两个事务,事务A和事务B。事务A对某些行的内容作了更改,但是还未提交。...幻读(phantom read):一个事务在前后两次查询同一个范围的时候,后一次查询看到了前一次查询没有看到的行。被其他事务插入或者删除的数据影响,一个事务内同样条件的数据记录变多或者变少了。