首页
学习
活动
专区
圈层
工具
发布

为什么MySQL不推荐使用子查询和join

来源:cnblogs.com/liboware/p/12740901.html 1.对于mysql,不推荐使用子查询和join是因为本身join的效率就是硬伤,一旦数据量很大效率就很难保证,强烈推荐分别根据索引单表取数据...2.子查询就更别用了,效率太差,执行子查询时,MYSQL需要创建临时表,查询完毕后再删除这些临时表,所以,子查询的速度会受到一定的影响,这里多了一个创建和销毁临时表的过程。...三、不推荐使用join的原因 1.DB承担的业务压力大,能减少负担就减少。...这种时候是不建议跨库join的。目前mysql的分布式中间件,跨库join表现不良。...四、不使用join的解决方案 在业务层,单表查询出数据后,作为条件给下一个单表查询。也就是子查询。会担心子查询出来的结果集太多。mysql对in的数量没有限制,但是mysql限制整条sql语句的大小。

5.7K30

必知必会——关于SQL中的NOT IN优化

因此,就我的意图而言,NULL不可能是煤炭或木材,因此我希望IN不返回A,并且我希望NOT IN返回A。 那么,应该怎么做才能使NOT IN表现出预期的效果? 简单!...“ NOT IN(子查询)”也会发生相同的问题。让我们添加此表: ? 查询加热不产生二氧化碳的房屋: ? >没有结果。 再次缺少A。同样,解决方案是: ? 现在我得到A。...我可以改写为NOT EXISTS,但这是需要更多的编辑工作: ? 这也返回A。 如果我做两次重写中的任何一个,我就会以某种方式向MySQL声明我希望NULL是我的NOT IN的明确匹配项。...我们可以在EXPLAIN中进行检查;首先,我们有一个初始的NOT IN,其中一个查询计划显示每个房屋执行一个子查询,并且每次都进行表扫描(这效率很低): ?...现在我的搜索查询时间是: ? 反联接计划以更少的百分之二十的时间返回更多的行(如预期的那样,包括NULL)。

5.7K40
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    云数据库升级之后开始报 1055,先别急着改 SQL 语句

    云数据库实例的小版本升级如果跨了这条线,实例参数会按新版本的默认模板靠拢,原来的宽松行为就消失了。...版本默认是否包含ONLY_FULL_GROUP_BY现象MySQL5.6及更早否非分组列随便取一行,不报错MySQL5.7是旧语句集中暴露,开始报1055MySQL8.0是行为延续,函数依赖判断更完整这也解释了为什么升级当天接口大面积...官方手册对这个模式的表述是:它会拒绝那些在选择列表、HAVING条件和排序子句中引用非聚合列、而这些列又不在分组条件里的查询。这里有两点容易误解。...改法语义影响适用场景把列补进分组条件分组粒度变细,结果行数可能变多该列确实参与分组语义用聚合函数包住取值规则明确,结果可预期只需要一个有代表性的值用ANY_VALUE包住消除报错,但不保证取到哪一行取值确实无关紧要第一种改法最直接...如果业务上其实希望取最新那条或者金额最大那条,正确做法是用子查询、窗口函数或者带排序的关联,把取值规则写进语句里,而不是用一个函数把问题盖住。还有一种隐蔽用法是拿它包住分组列本身。

    8910

    分布式 | DBLE 3.21.06.0 来了!

    新版 DBLE 新增&重构功能 8 个,修复缺陷 10+ 个,和旧版本的不兼容项调整 2 处。...主要更新: 1、提供了一个开关,决定是否将 in-Subquery 转换为 join 在此版本之前,我们会默认将in子查询尝试转为 join 来生成执行计划,现在我们增加一个全局配置项,由用户来决定是否应该转化...2、查询计划的进一步优化 如果一条复杂查询的子查询和外部使用了同一张表,并且路由的结果也一致,那么这条 sql 应该被直接下发,而不是重写后下发算子 3、支持 XA 事务的残留检查 由于各种原因,mysql...主要缺陷修复: [#2622] set autocommit 没有按预期工作。 [#2638] 开着慢日志,dble 可能会出现 oom。...未按照预期执行 偶现的 ArrayIndexOutOfBoundException 3.21.02.2 复杂查询可能导致的线程泄漏 开着慢日志,dble 可能会出现 oom 检查表一致性问题 读写分离中

    4.2K20

    分页别写太顺手,LIMIT 背后还有排序和边界

    id 从 1 到 30 固定下来,后面看到 1-5、6-10、11-15,就能马上判断 offset 有没有按预期生效。score 暂时只是辅助字段,不在这里展开排行榜或同分排序。...如果只是取几条临时看数据,不写排序也能返回结果;但只要叫“前 5 条”,就应该先说清楚按什么顺序算前 5 条。这里按 id 排,返回 1 到 5 才有明确含义。接着看分页。...同一张材料里再补了一条带 order by id 的查询,返回仍然是 1 到 5。差别不在这次小表输出,而在 SQL 是否把顺序说清楚了。...分页接口、列表查询、导出预览,只要结果要给人看或者要翻页,就不要省排序字段。真实业务里还会遇到另一种情况:排序字段本身不唯一。...分页 SQL 可以先按 MySQL 的习惯写起来,但每条分页查询都要问一句:这个列表到底按什么字段稳定排序。这组实验没有证明深分页性能,也没有比较不同写法的执行计划。

    61300

    【原创】MySQL数据库开发中的6个“避免”

    MySQL并不擅长数学运算和逻辑判断,所以尽量不在数据库做运算,复杂运算可以移到程序端CPU。...2、避免对索引列做运算 有次,有位同事让我看一条SQL,说是在前台查询很快,但是把SQL取出来,在数据库中执行的时候,跑10分钟都不出结果。 看了一下SQL,最后定位到一个视图中的一个子查询上面。...该子查询的SQL文本如下: SELECT acinv_07.id_item , SUM(acinv_07.dec_endqty) dec_endqty FROM acinv_07...(*)相当于同一个语句查询了两次,对数据库的开销自然就大了,我们应当使用数据库自带的API,或者系统变量来完成这个工作。..."zhaoyun"),(2,"zhangfei"),(3,"liubei") insert into table2 values (1,"zhaoyun"),(2, null) (1) NOT IN子查询在有

    88130

    mysql中find_in_set()函数的使用

    一个字符串列表就是一个由一些被 ‘,’ 符号分开的子链组成的字符串。如果第一个参数是一个常数字符串,而第二个是type SET列,则FIND_IN_SET() 函数被优化,使用比特计算。...如果str不在strlist 或strlist 为空字符串,则返回值为 0 。如任意一个参数为NULL,则返回值为 NULL。这个函数在第一个参数包含一个逗号(‘,’)时将无法正常运行。...2的用户,如果用like关键字的话,则查询结果如下: SELECT * FROM users WHERE limits LIKE '%2%'; 这样第二条数据不具有权限'2'的用户也查出来了,不符合预期...一个字符串列表就是一个由一些被 ‘,’ 符号分开的子链组成的字符串。如果第一个参数是一个常数字符串,而第二个是type SET列,则FIND_IN_SET() 函数被优化,使用比特计算。...2的用户,如果用like关键字的话,则查询结果如下: SELECT * FROM users WHERE limits LIKE '%2%'; 这样第二条数据不具有权限'2'的用户也查出来了,不符合预期

    5.2K40

    腾讯云国际站注册:服务器内存不足频繁卡死?10步排查与优化指南

    代码层面的缺陷——比如Java堆中对象未被回收、PHP-FPM子进程长期运行后内存不释放——不会立刻导致崩溃。...关键事实是:当物理内存耗尽、Swap空间也被写满时,Linux内核的OOMKiller会被激活,它会按自己的评分机制随机“处决”一个进程,而这个进程经常就是你的MySQL或Nginx主进程。...Java/PHP进程内存调优Java应用最常见的问题不是“用得多”,而是“不释放”。...MySQL的performance_schema里,可按内存统计查询:sys.statement_analysis能直观列出哪些SQL临时表创建过多或排序内存使用超标。...用stress-ng模拟高负载,观察内存触顶时OOMKiller是否按预期结束非核心进程、SWAP占用是否可控、应用是否能自动恢复。重点关注大对象缓存(如Redis、数据库连接池)的峰值与恢复曲线。

    49710

    技术分享 | 某二手交易平台数据安全实践(建议对照自检)

    子查询问题:不管是 SELECT 后面使用子查询,还是 FROM 后面使用子查询,还是 WHERE 后面使用子查询,都会对获取表名列表结果产生影响,可能无法获取预期内的表名列表。...而多层子查询又是更加复杂的问题。 四则运算问题:SELECT 后面使用了运算符,如常见的加减乘除会对获取字段列表结果产生影响,甚至大部分情况下都是结果未达到预期。...后面多一个空格,在 MySQL 里面是不会报错,能正常执行。但是解析的时候会有问题,最终会对获取表名列表结果产生影响,甚至大部分情况下都是结果未达到预期。...这部分工作倒是没什么特别复杂的,就说几个注意事项: MySQL 版本问题:5.6、5.7、8.0 的的执行计划结果不一样,需要注意适配。...预估行问题:对于使用子查询或者连接查询的场景,预估行需要求乘积。

    85010

    Mysql进阶优化篇05——子查询的优化和排序优化

    MySQL 从 4.1 版本开始支持子查询,使用子查询可以进行 SELECT 语句的嵌套查询,即一个 SELECT 查询的结果作为另一个 SELECT 语句的条件。...子查询可以一次性完成很多逻辑上需要多个步骤才能完成的操作 。 子查询是 MySQL 的一项重要的功能,可以帮助我们通过一个 SQL 语句实现比较复杂的查询。但是,子查询的执行效率不高。...原因: 执行子查询时,MySQL 需要为内层查询语句的查询结果建立一个临时表 ,然后外层查询语句从临时表中查询记录。查询完毕后,再撤销这些临时表 。...对于返回结果集比较大的子查询,其对查询性能的影响也就越大。 在 MySQL 中,可以使用连接(JOIN)查询来替代子查询。...场景:查询年龄为30岁的,且学生编号小于101000的学生,按用户名称排序 先删除以前的索引。再测试如下sql。

    3.4K21

    AI中台:开发环境下测试库的部署

    测试环境所使用的数据库另行部署,不在本文范围。两者名称相近,施工与交接时须区分,不得混用。测试库用于三项工作:验证连接器能否连通并抽取、向跨系统对照提供样本数据、确认对照所需字段能否取到值。...元数据经集成层只读通道自源系统拉取,不在测试库中获取。测试库不承担业务系统功能测试,亦不承担性能压测,后者属测试环境的工作。...测试库只读账号仅授查询权限,不授DDL与写入;脚本账号仅在其所需库表范围内授予写入。所有账号启用口令策略与登录审计,账号回收记录随方案归档。四、抽取数据抽取按行进行,不按字段列抽取。...统计信息陈旧将使查询计划异常,表现为查询缓慢,被误判为集成层性能问题。5.灌数判据。各表实际写入行数与抽取行数一致,无非预期报错,总耗时与预估相符。...逐表比对抽取行数与写入行数,非预期差异为零。存在预期过滤条件的,写明过滤规则与预期差异量,据此判定。出现差异的,注明属抽取遗漏、约束拒绝或批处理中断。2.脱敏有效。

    19010

    为什么公共事业机构会偏爱 TiDB :TiDB 数据库在某省妇幼健康管理系统的应用

    架构总体上分为四块,自底向上分别是:数据层:源端数据源主要是 MySQL 为主的关系型数据库。分别搭建 5 套(10 台)主从分别承接 14 个子库和 1 个总库 MySQL 子库 700+表。...DBA 工作压力巨大:当前架构对 DBA 的工作强度要求较高。...按地市分割的数据库不利于跨市业务服务的兼容,例如,报表通常需要通过创建宽表来汇总各数据库的数据,这导致宽表数量不断增加。此外,还存在档案重复和无法跨地市查询服务记录等问题。...分析层改造后收益在将 StarRocks 替换为 TiFlash 后, 与按地市分库的 S tarR oc ks 相比, 我们发现整体查询效率并未显著提高,经过优化,常用的查询 已能够达到预期的性能标准...(全量快照+实时日志备份)可保证数据不丢失。BR 还原数据超乎预期,300G 数据还原用时 20 分钟(v7.1.3),官方最新版本 v7.6 最新版本 BR 还原能力提升 10 倍。

    61010

    B 树深度解析:从底层原理到数据库实战,彻底掌握索引核心

    如果用二叉搜索树(BST)存储海量数据,树的高度会达到几十甚至上百层,每次查询需要几十次IO;而B树的高度通常不超过5层,即使存储亿级数据,也能在几次IO内完成查询。...用流程图展示查找过程: 2.2 插入操作 插入操作的核心是保持B树的性质,尤其是节点关键字数量不超过m-1。...MySQL的InnoDB存储引擎采用B+树作为索引结构,原因有三: 范围查询友好:叶子节点的双向链表让范围查询(如SELECT * FROM table WHERE id BETWEEN 10 AND...5.1 实战场景说明 假设我们有一个电商订单表order_info,存储100万条订单数据,需要优化以下查询场景: 按订单号(order_no)精确查询订单详情 按用户ID(user_id)+ 订单创建时间...interceptor; } } 5.4 索引优化验证 5.4.1 执行计划分析(EXPLAIN) 通过EXPLAIN命令分析查询是否命中索引: -- 按订单号查询(唯一索引) EXPLAIN

    56810

    MyEMS 自带标准化报表,能耗、碳排报表不用再手动整理

    碰上季度报告或年度碳核查,工作量直接翻倍。这件事的荒谬之处在于:数据从采集到整理的全过程都是确定性的——同一块电表读数、同一个排放因子、同一套折算公式——却每次都要人工重走一遍。...获取空间关联的所有表计、虚拟表、离线表、组合设备、设备、车间、门店、租户和子空间从能源数据库中提取各实体在指定时间段内的能耗数据确定所有实体能耗数据的公共时间范围按能源类别和小时粒度汇总,结果写回能源数据库这意味着报表查询时读取的是预聚合结果...数据存储层采用混合存储架构:存储引擎职责存储内容时序数据库(InfluxDB)高频时序数据写入与查询功率、流量、温度等带时间戳的数值序列关系型数据库(MySQL)结构化配置与业务数据设备档案、用户权限、...每个空间独立处理其下所有关联实体的能耗数据,确定公共时间范围后按能源类别和小时粒度汇总。报表生成层报表服务通过 RESTful API 提供标准化查询接口。...:报表查询走预聚合结果,不在原始数据上实时计算,大规模部署时性能稳定排放因子库可自定义:企业可以上传实测排放因子,适配行业特殊需求开源代码可审计:报表计算逻辑完全透明,满足核查场景下"算法可验证"的要求项目基于

    35320

    最完整的Explain总结,妈妈再也不担心我的SQL优化了

    在 select 语句之前增加 explain 关键字,MySQL 会在查询上设置一个标记,执行查询时,会返回执行计划的信息,而不是执行这条SQL(如果 from 中包含子查询,仍会执行该子查询,将结果放入临时表中...MySQL将 select 查询分为简单查询(SIMPLE)和复杂查询(PRIMARY)。 复杂查询分为三类:简单子查询、派生表(from语句中的子查询)、union 查询。...1.simple简单查询。查询不包含子查询和union mysql> explain select * from film where id = 2; ?...最完整的Explain总结,妈妈再也不担心我的SQL优化了 2)primary:复杂查询中最外层的 select 3)subquery:包含在 select 中的子查询(不在 from 子句中) 4)derived...:包含在 from 子句中的子查询。

    1.3K20

    delete in子查询不走索引?!

    ;显然,这个执行计划和我们预期不符合,因为并没有走索引。...`name`) 可以发现,实际执行的时候,MySQL对select in子查询做了优化,把子查询改成join的方式,所以可以走索引。...但是很遗憾,对于delete in子查询,MySQL却没有对它做这个优化。 优化方案 那如何优化这个问题呢?通过上面的分析,显然可以把delete in子查询改为join的方式。...实际上,对于update或者delete子查询的语句,MySQL官网也是推荐join的方式优化 其实呢,给表加别名,也可以解决这个问题哦,如下: explain delete a from account...因此,加别名就可以让delete in子查询走索引啦! 总结 本博文分析了delete in子查询不走索引的原因,并附上解决方案。

    3.2K40

    「Mysql优化大师三」查询执行计划explain详解,含案例

    UNION结果总是放在一个匿名临时表中,之后mysql将结果读取到临时表中。临时表并不在原sql中出现,因此它的id列是null。...Estimate of rows to be examined 案例: --sample:简单的查询,不包含子查询和union explain select * from emp; --primary...通常意味着mysql将扫描整张表,从头到尾,去找到需要的行。 index 这个跟全表扫描一样,只是mysql扫描表时按索引次序进行而不是行。...如果在Extra列中看到了“Using index”,说明mysql正在使用覆盖索引,它只扫描索引的数据,而不是按索引次序的每一行。它比按索引次序全表扫描的开销要少很多。...key_len 表示索引中使用的字节数,可以通过key_len计算查询中使用的索引长度,在不损失精度的情况下长度越短越好。

    1.9K10

    联合索引失效排查:从key_len定位字符集陷阱,6秒查询降到0.08秒

    不同查询条件下的key_len预期值:查询条件实际匹配列预期key_len说明WHEREuser_id=1024仅user_id5只用了第一列WHEREuser_id=1024ANDstatus='paid'user_id...查询条件传入的字符串走的是连接字符集utf8mb4,和索引定义的utf8不一致。MySQL遇到字符集不匹配时,会做隐式转换,把索引列的值转成查询条件的字符集再比较。...MySQL不需要回表,直接在索引的B+树上就能拿到所有数据。每次回表就是一次随机I/O。数据不在bufferpool里时,每次随机读可能要几毫秒。...结果查询1和查询2全慢了,它们的频率远高于查询3,我为了优化低频查询牺牲了高频查询。联合索引的列顺序应该按查询频率排,不是按区分度。区分度原则只在查询频率相近时有参考价值。...建完跑一遍EXPLAIN,盯着key_len看是否用到了预期的列。最后用EXPLAINANALYZE(MySQL8.0.18+)看实际执行时间和预估是否一致。

    29310
    领券