首页
学习
活动
专区
圈层
工具
发布

MySQL中10多张表关联要做优化,怎么理解逻辑幂等

最近优化了一条MySQL的慢查询SQL,还是蛮有感触,小结一下。...tag_id:1,prod_id:200 tag_id:2,prod_id:100 按照业务逻辑,如果tag表中的做过滤后的数据为 tag_id:1,tag_status:ACTIVE, 则根据SQL...的逻辑,left join会和表tag_product再做一次连接,数据以tag表中的tag_id为准,输出就是: tag_id:1,prod_id:100 tag_id:1,prod_id:200 而如果采用上述的连接方式...当然沟通的过程中,也进一步理解了需求,其实我们所谓的逻辑幂等,不是真正意义上的业务逻辑幂等。 从业务逻辑幂等上,是按照表tag的输出为标准。...在业务层明确之后,而且输出结果和预期一致的情况下,整个改动的部分就是删除了left join中的left,整个 SQL的执行效率又变得更加流畅。

4.5K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    删除MySQL表中的重复数据?

    前言一般我们将数据存储在MySQL数据库中,它允许我们存储重复的数据。但是往往重复的数据是作废的、没有用的数据,那么通常我们会使用数据库的唯一索引 unique 键作为限制。...那么如何在一个普通的数据库表中删除重复的数据呢?那我用一个例子演示一下如何操作。。。...和 不等于 2.中同时删除空的业务主键数据那么便有以下几个查询:/*1、查询表中有重复数据的主键*/select rd2.iccId from flow_card_renewal_comparing rd2...flow_card_renewal_comparing rd2 GROUP by rd2.iccId having count(rd2.iccId)>1 )or iccId is null注意一点是mysql...做删除的时候会提示不能用查询的结果来做删除操作,这个时候就需要将查询的数据作为一个临时表,起别名进行删除啦。

    11.3K10

    清空表与删除表mysql

    Mysql清空表(truncate)与删除表中数据(delete)的区别 为某基于wordpress搭建的博客长久未除草,某天升级的时候发现已经被插入了几万条垃圾留言,如果一条条删除那可真是累人的活。...遂考虑直接进入mysql直接清空表或者删除表中数据。 本文记录一下这2种操作模式的区别,目标对象是表wp_comments,里面的所有留言均是垃圾留言,均可删除。...然后便有了以下2种方式(进入mysql操作界面后): truncate table wp_comments; delete * from wp_comments; 其中truncate操作中的table...这两者都是将wp_comments表中数据清空,不过也是有区别的,如下: truncate是整体删除(速度较快), delete是逐条删除(速度较慢)。...而delete删除以后,Identity依旧是接着被删除的最近的那一条记录ID加1后进行记录。 如果只需删除表中的部分记录,只能使用DELETE语句配合where条件。

    12.1K20

    MySQL 删除数据表

    MySQL 删除数据表MySQL中删除数据表是非常容易操作的,但是你在进行删除表操作时要非常小心,因为执行删除命令后所有数据都会消失。...语法以下为删除MySQL数据表的通用语法:DROP TABLE table_name ;----在命令提示窗口中删除数据表在mysql>命令提示窗口中删除数据表SQL语句为DROP TABLE:实例以下实例删除了数据表...DROP TABLE kxdang_tbl;Query OK, 0 rows affected (0.8 sec)mysql>----使用PHP脚本删除数据表PHP使用 mysqli_query 函数来删除...MySQL 数据表。...可以是下列值中的任意一个: * MYSQLI_USE_RESULT(如果需要检索大量数据,请使用这个) * MYSQLI_STORE_RESULT(默认)实例以下实例使用了PHP脚本删除数据表 kxdang_tbl

    7.8K30

    python 多线程删除MySQL表

    一、需求分析 在《python 统计MySQL表信息》这篇博客中,链接如下: https://www.cnblogs.com/xiao987334176/p/9901692.html 已经统计出来了一个...领导需要将不使用的表,全部删除掉。但是有一个前提:删除之前,一定要做备份。 二、MySQL表备份问题 怎么备份呢?有2个方案 1. 使用mysqldump 备份单个表,也就是要删除的表 2....但是我们要知道,备份千万级别的表,非常耗时。 它需要一行行读取,并写入到备份文件中。这还只是单表的情况下,几千张表,就无法想象了!...注意:屏幕和文件,会同时写入。屏幕写入,也就是打印在屏幕的意思 ? ?...最后筛选出为否的记录,删除多余的列,只复制库名和表名到一个delete.txt文件中。 注意:删掉中文标题,效果如下: ?

    8.4K50

    Mysql删除表数据,表文件大小不变

    首先明确一个概念,innodb表包含两部分,表结构定义和数据,Mysql8.0以前表结构定义存放在.frm为后缀的文件里,而Mysql8.0版本以后允许表结构定义放到系统数据表中,因为表结构定义占用的空间很小...,因此我今天主要说是表数据, 日常开发中,当我们删除一个表的的数据的时候,发现表空间大小并不会变小,我们要知道为什么会发生这样神奇的事, 参数innodb_file_per_table 表数据可以存在共享表空间里...,Mysql5.6.6以后默认就是ON 无论使用哪个版本我们都建议把这个值设置成ON,单独放到一个文件,方便管理,当我们不需要这个表的时候,通过drop table 就可以直接删除这个文件。...我们可以使用下面命令重建表,在mysql5.5版本之前,这个命令的执行流程跟我们前面描述的差不多,区别就是这个临时表B不需要手动创建,MySql会自动完成转存数据,就换表明,删除旧表的操作 ?...显然上图中最花时间的步骤是往临时表插入数据的过程,如果整个过程中,有新的数据写入是不被允许的,这个就会造成数据丢失,表A不会有数据的更新,这个DDL不是Online的 但是在mysql5.6版本开始引入

    7.1K10

    MySQL 批量删除表的实现方式

    在实际应用中,有时候需要批量删除以特定前缀命名的表(如数据清理或数据处理时生成的临时表)。这里分享实现这一功能的方法和注意事项,以便避免实现过程中出现问题。...基本思路 使用 information_schema.tables 获取相关表名。 根据表名生成 DROP TABLE 语句。 通过动态 SQL 或采用流转一个一个删除。...使用流转逐表删除 这个方法适合对表量较多的情况,通过流转一个一个删除: -- 先删除已存在的存储过程 DROP PROCEDURE IF EXISTS DropTablesWithPrefix; --...通过脚本实现 如果想使用脚本来控制操作,例如使用 Python 进行删除: Python 脚本示例 import mysql.connector # 连接数据库 conn = mysql.connector.connect...批量删除表时,需要根据实际场景选择适合的方法: 对表量少的情况,可使用动态 SQL。

    4.6K10

    MySQL异步删除大表的方法

    背景在MySQL中有大表需要清理,该表超过100GB,不敢直接delete或者truncate、drop,怕影响业务。...删除指定的部分数据,使用delete from xxx where ...删除所有数据(只是删除数据,需要保留表结构),那么建议使用truncate命令,比直接delete快.删除整个表,使用drop...truncate只能作用于表;delete,drop可作用于表、视图等。truncate会清空表中的所有行,但表结构及其约束、索引等保持不变;drop会删除表的结构及其所依赖的约束、索引等。.../product/236/48904实现原理如下:将ibd文件名重命名为临时文件名,临时文件存放在 innodb_async_drop_tmp_dir 指定的目录下在后台线程中逐步truncate ....,由内核自动完成,其原理是在删除表时,为表的数据文件在另外一个目录中创建一个硬连接。

    6.6K110

    Innodb中MySQL如何快速删除2T的大表

    ps:my.cnf中的datadir就是用来设置数据存储目录 好了,上面巴拉巴拉了一大堆,我只想说一个事情: 在绝大部分情况下,运维一定会为mysql选择独立表空间的存储方式,因为采用独立表空间的方式,...在数据库mytest中,有一个表,名为erp,执行下列命令 mysql> system ls -l /data/mysql/mytest/  得到下面的输出(我过滤了一下) -rw-r----- 1...现在就是erp.ibd文件太大,所以删除卡住了。 如何解决这个问题呢? 这里需要利用了linux中硬链接的知识,来进行快速删除。...因为,此时有两个文件名称(erp.ibd和erp.ibd.hdlk),同时指向一个innode.这个时候,执行删除操作,只是把引用给删了,所以非常快。...那么,这时的删除,已经把table从mysql中删除。但是磁盘空间,还没释放,因为还剩一个文件erp.ibd.hdlk。 如何正确的删除erp.ibd.hdlk呢?

    4.2K20
    领券