首页
学习
活动
专区
圈层
工具
发布

MySQL索引(六)索引优化补充,分页查询、多表查询、统计查询

实际上MySQL 会先读取完 10010 条数据,再过滤掉前 10000 条数据,这样的执行效率是非常低的。 优化手段 若是根据id 主键分页,同时主键自增且连续。...若sql 语句采用了 ORDER BY 排序非主键字段,上诉优化方案也是不能使用的。 那么根据非主键进行排序的分页查询有办法进行优化吗?...多表查询的两种算法 MySQL 的多表查询会用到两种方案:嵌套循环连接(Nested-Loop Join) 算法和基于块的嵌套循环连接 (Block Nested-Loop Join) 算法。...EXPLAIN SELECT * FROM t1 INNER JOIN t2 ON t1.b = t2.b; 从查询计划中我们得知,b 字段没有索引,MySQL 选择BNL 算法来执行多表查询,extra...多表查询优化 对关联字段设计索引:对于索引字段,MySQL 一般会选择NLJ 算法, 使用小表驱动大表:在设计时如果明确哪个关联表是小表,可以使用 straight_join,会节省MySQL 优化器判断大小表时间

3.2K10

MySQL——优化嵌套查询和分页查询

,是因为MySQL不需要在内存中创建临时表来完成这个逻辑上需要两个步骤的查询工作;并且Not exists表示MYSQL优化了LEFT JOIN,一旦它找到了匹配LEFT JOIN标准的行, 就不再搜索了...优化分页查询 在MySQL中做分页查询,MySQL 并不是跳过 offset 行,而是取 offset+N 行,然后返回放弃前 offset 行,返回 N 行,那当 offset 特别大的时候,效率就非常的低下...由此可见MySQL的分页处理并不是十分完美,需要我们在分页SQL上做一些优化,要么控制返回的总页数,要么对超过特定阈值的页数进行 SQL 改写。...第一种优化思路 在索引上完成排序分页的操作,最后根据主键关联回表查询所需要的其他列内容。 画外音:此处涉及到了SQL优化的两个重要概念,索引覆盖和回表,我在前面的文章中详细介绍过这两个概念。...总结 对于嵌套查询和分页查询的优化,归根结底就是遵循SQL优化原则之一——减少回表查询的I/O次数。对于分页查询优化,更建议使用第一种优化方案,性能更好,稳定性更高。 参考 《深入浅出MySQL》

4.3K21
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MySQL 案例:Limit 分页查询优化

    在 MySQL 支持的 SQL 语法中对此有特殊的支持,开发人员在实现这类功能的时候很方便: select * from xxx limit M,N select * from xxx limit N...优化策略 针对这个问题,其实有一个比较通用的优化思路:利用 join,先根据主键搜索到需要的数据,再通过主键关联到原来的表输出结果。...在分页查询的时候,记录上一次查询结果中的主键,然后在 where 条件中添加主键的范围约束。...以上面的查询为例,上次分页查询时的主键是 8000001,那么下次分页的时候,where 条件中添加一个主键约束:id > 8000001,再来看看查询效果: [添加条件之后的效果] 可以发现利用主键来筛选掉上一次分页前的所有数据后再用...总结一下 MySQL 由于本身查询优化器覆盖到的场景不够全,慢查询的原因也千奇百怪,各类业务 SQL 在上线前尽量多覆盖一些场景,确保业务功能安全发布。

    5K4432

    Mysql进阶优化篇03——多表查询的优化

    文章简介:本文将介绍多表查询的sql优化,绝对不需要死记硬背,建议收藏备用。...Mysql进阶优化篇01——四万字详解数据库性能分析工具(深入、全面、详细,收藏备用) Mysql进阶优化篇02——索引失效的10种情况及原理 大厂SQL面试真题大全 文章目录 1.数据准备 2....采用左外连接 我们知道多表查询分为外连接和内连接,而外连接又分为左外连接,右外连接和满外连接。...实际上,由于我们总是需要在被驱动表中进行查询,优化器帮我们已经做了优化,上面的查询结果中可以看到,使用了join buffer,将数据缓存起来,提高检索的速度。...这是因为内连接优化器可以决定驱动表。在只有一个表存在索引的情况下,会选择存在索引的表作为被驱动表(因为被驱动表查询次数更多)。 再加上索引。

    1.7K20

    mysql慢查询优化-分页慢查询篇

    前提介绍 为何分页查询在测试环境没事,在生产上几千万的数据就出现了问题 在平时开发时,由于数据量没有那么大,所以测试有时候会不到位,比如用到的分页查询,使用不规范时,数据量越大,查询越慢,而且有 长时间进程不结束...,会导致内存不足等风险 传统分页查询:SELECT c1,c2,cn… FROM table LIMIT n,m MySQL的limit工作原理就是先读取前面n条记录,然后抛弃前n条,读后面m条想要的,...因为要取出所有字段内容,这种需要跨越大量数据块并取出 推荐分页查询方法 通过直接根据索引字段定位后,才取出相应内容,效率自然大大提升。...id from product limit 866613, 20) b ON a.ID = b.id 3、高性能MySQL一书中提到的只读索引方法 优化前SQL: SELECT c1,c2,cn… FROM...而优化后的SQL(子查询那条)只读索引(Cover index)就可以了,然后通过member_id读取需要的列。

    4.4K21

    mysql 多表查询

    一、使用SELECT子句进行多表查询 SELECT 字段名 FROM 表1,表2 … WHERE 表1.字段 = 表2.字段 AND 其它查询条件 SELECT a.id,a.name,a.address...WHERE子句的查询条件即称为内连接 五、复杂的嵌套查询 多表之间的嵌套查询可以通过谓词IN实现,语法格式如下: test_expression[NOT] IN{ subquery } 参数说明...:test_expression指SQL表达式,subquery包含某结果集的子查询 多表嵌套查询的原理:无论是多少张表进行嵌套,表与表之间一定存在某种关联,通过WHERE子句建立此种关联实现查询 六...、嵌套查询在查询统计中的应用 实现多表查询时,可以同时使用谓词ANY、SOME、ALL,这些谓词被称为定量比较谓词,可以和比较运算符联合使用,判断是否全部返回值都满足搜索条件.SOME和ANY谓词是存在量的...,这样可以方便用户在使用mysql_fetch_array()函数时为表项赋值,如 SELECT (SELECT AVG(chinese) FROM tb_demo071) AS yuwen ,(SELECT

    7.9K10

    MySQL 多表查询

    # MySQL 多表查询 mysql多表查询 问题的引出(重点,难点) 说明 多表查询练习 自连接 mysql表子查询 什么是子查询 单行子查询 多行子查询 在多行子查询中使用 all 操作符 在多行子查询中使用...any 操作符 多列子查询 在 from 子句中使用子查询 表复制 自我复制数据(蠕虫复制) 合并查询 介绍 外连接 课堂练习 # mysql多表查询 # 问题的引出(重点,难点) # 说明 多表查询是指基于两个和两个以上的表查询....在实际应用中,查询单个表可能不能满足你的需求. # 多表查询练习 -- 多表查询 -- 显示雇员名,雇员工资及所在部门的名字【笛卡尔积】 SELECT * FROM salgrade SELECT...,dname,emp.deptno FROM emp,dept WHERE emp.deptno=dept.deptno -- 小技巧:多表查询的条件下不能少于 表的个数-1,否则会出现笛卡尔积...2.把上面的结果当做子查询,和emp进行多表查询 SELECT ename,sal,temp.avg_sal,emp.deptno FROM emp,( SELECT deptno,AVG(sal

    5.7K20

    MySQL多表查询

    MySQL多表查询 交叉连接查询 语法:selectfrom 表1 cross join 表2; 或  selectfrom 表1,表2; 这样查询到的结果为两个表中所有数据行的乘积即笛卡尔积...内连接查询: 注意:要查询的表,查询的条件,查询的字段。...复合条件连接查询 定义:复合条件连接查询就是在连接查询的过程中,通过添加过滤条件来限制查询结果,使查询结果更加精确。 子查询(嵌套查询) 定义:子查询是指一个查询语句嵌套在另一个查询语句内部的查询。...在执行查询语句时,首先会执行子查询中的语句,然后将返回的结果作为外层查询的过滤条件。...IN :用于判断一个给定值是否存在于子查询的结果集中。 EXISTS :用于判断子查询的结果集是否为空。若子查询的结果集不为空,则返回 TRUE;否则返回 FALSE。

    4.6K10

    MySQL之分页多次查询优化 原

    分页查询一般都会出现俩次查询,此时会有如下情况: 要得到满足条件的那一页记录数。 要得到满足条件的总记录数。    ...如果在第一个查询和第二个查询之间新增或者删除了一些数据,那么查询的结果就不准备了。我想大家都能想象这个场景,在此就不举例。    ...有什么解决方法,不会出现上述的问题,经过一番搜索,发现MySQL可以使用 List-1 ELECT FOUND_ROWS();     我们来验证下: 1.不带Limit的查询情况 List-2 得到...    这里就不再给出具体例子,看MySQL官网文档,上面有具体描述。...Reference: MySQL官网: https://dev.mysql.com/doc/refman/8.0/en/information-functions.html https://blog.sqlauthority.com

    1.5K50

    MySQL 百万级数据分页查询优化

    大数据量使用limit分页,随着页码的增大,查询效率越低下。...对limit分页问题的性能优化方法 利用表的覆盖索引来加速分页查询 我们都知道,利用了索引查询的语句中如果只包含了那个索引列(覆盖索引),那么这种情况会查询很快。...因为利用索引查找有优化算法,且数据就在查询索引上面,不用再去找相关的数据地址了,这样节省了很多时间。另外Mysql中也有相关的索引缓存,在并发高的时候利用缓存就效果更好了。...复合索引优化方法 MySql 性能到底能有多高?MySql 这个数据库绝对是适合dba级的高手去玩的,一般做一点1万篇新闻的小型系统怎么写都可以,用xx框架可以实现快速开发。...完美解决了分页问题了。可以快速返回id就有希望优化limit , 按这样的逻辑,百万级的limit 应该在0.0x秒就可以分完。看来mysql 语句的优化和索引时非常重要的!

    2.6K20

    mysql千万级分页查询SQL优化

    (优化前页面需要转 1 分钟才可显示出数据,页面转圈圈~) 这个功能对应的是后台的一个千万级别的大表,未分库分表,目前的数据量为13755695,分页查询使用到了limit,优化之前的查询耗时30 s,...按照下文的方式调整SQL后,耗时800 ms; 关于分页的优化 使用limit分页时的MySQL并不是跳过offset行,而是取offset+N行,然后返回放弃前offset行,返回N行,那当offset...而 count 函数又是必不可少的,因为需要查询总数,以供分页显示总条数及最后一页,所以必须从 count 优化入手 2、 如果技术上优化遇到了瓶颈,或者说 mysql 已经优化到极致,那么能否从业务上解决...此种优化最终实现:列表数据加载 分页组件加载 >40 秒 其他优化思路 通过学习研究发现,mysql innodb 引擎在有索引、有 where 条件的情况下,count 速度并不慢,所以问题一样还出在...3.最终优化: 列表数据查询 130ms,分页插件查询 (count 查询)150ms,目前数据单表数据量级在 2000 万左右,以次时间效率推断,多查询条件的复杂分页查询,可以支持单表几亿没有问题。

    2.7K20

    Oracle总结【SQL细节、多表查询、分组查询、分页】

    这里写图片描述 ---- 多表查询、子查询 当我们一张表不能把数据查询出来的时候,就需要连接其他的表一起查询…. 当我们的查询条件还没知道的时候,我们就可以使用子查询…....一般地,子查询和多表查询的功能都是差不多的…....【Oracle分页就是这个原理】 ---- 值得注意的是多表查询的数学基础是笛卡尔积,也就是说:如果两张实体表进行连接,那么它会构成一张笛卡尔积表…也就是说:最终就只有一张笛卡尔积表 ?...这里写图片描述 综上所述:在Oracle中使用多表查询性能可能比子查询好一些 ---- Oracle分页 在讲解JDBC的时候,我们就已经讲过Oracle与Mysql的分页问题了….详情可以看我的博文:...那么Oracle分页的思路是这样子的: 先在子查询中获取前n条记录 由于返回的是多行多列,因此我们可以看做成一张表 那么将查询出来的数据放在from字句的后边 外套的查询可以通过where字句来对子查询出来的数据进行过滤

    3.7K100
    领券