首页
学习
活动
专区
圈层
工具
发布

mysql优化模糊查询效率

基础概念

MySQL中的模糊查询通常使用LIKE语句来实现,例如:

代码语言:txt
复制
SELECT * FROM table_name WHERE column_name LIKE '%keyword%';

这种查询会扫描整个表来匹配包含特定关键词的记录,当数据量较大时,效率会非常低下。

优势

模糊查询提供了灵活的数据检索方式,允许用户通过部分关键字来查找数据,这在很多实际应用场景中是非常有用的。

类型

模糊查询主要有以下几种类型:

  1. 前缀匹配:LIKE 'keyword%'
  2. 后缀匹配:LIKE '%keyword'
  3. 通配符匹配:LIKE '%keyword%'

应用场景

模糊查询广泛应用于搜索功能,如搜索引擎、电子商务网站的搜索框、日志分析等。

效率问题及原因

模糊查询效率低下的主要原因是它会进行全表扫描,尤其是当使用%作为通配符放在查询条件的开始位置时,MySQL无法使用索引来加速查询。

解决方案

  1. 使用全文索引: MySQL提供了全文索引(FULLTEXT)来优化文本搜索。对于较大的文本字段,可以创建全文索引来提高搜索效率。
  2. 使用全文索引: MySQL提供了全文索引(FULLTEXT)来优化文本搜索。对于较大的文本字段,可以创建全文索引来提高搜索效率。
  3. 参考链接:MySQL全文索引
  4. 使用前缀索引: 如果模糊查询总是以特定前缀开始,可以考虑使用前缀索引。
  5. 使用前缀索引: 如果模糊查询总是以特定前缀开始,可以考虑使用前缀索引。
  6. 优化查询条件: 尽量避免在查询条件的开始位置使用%,这样可以利用索引来加速查询。
  7. 优化查询条件: 尽量避免在查询条件的开始位置使用%,这样可以利用索引来加速查询。
  8. 分页查询: 对于大数据量的模糊查询,可以使用分页查询来减少每次查询的数据量。
  9. 分页查询: 对于大数据量的模糊查询,可以使用分页查询来减少每次查询的数据量。
  10. 使用第三方搜索引擎: 对于复杂的搜索需求,可以考虑使用Elasticsearch等第三方搜索引擎来替代MySQL的模糊查询。
  11. 参考链接:Elasticsearch官方文档

示例代码

假设我们有一个用户表users,其中有一个字段username,我们需要对其进行模糊查询:

代码语言:txt
复制
-- 创建全文索引
ALTER TABLE users ADD FULLTEXT(username);

-- 使用全文索引进行模糊查询
SELECT * FROM users WHERE MATCH(username) AGAINST('john');

通过上述方法,可以显著提高模糊查询的效率。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

MySQL模糊查询性能优化

结论写在最前面 用户基数估计 模糊查找接口qps估计 数据检索量估计 支持分布式搜索 支持短语搜索 支持分词 上述每一项都将是决定我们模糊查询最终的实现方案 业务场景分析 根据 模糊查找 的业务场景,比对一下上面列出的...就是KM和TAPD那种效果: [1526286645_33_w419_h273.png] --- 首先KM和TAPD都是通过后台给前端生成一个js文件,由前端去做模糊查找,这样比较经济实惠,没有后台查询损耗...Staffs表结构&查询接口 将员工数据导入到MySQL之后,共有 59066 条数据,大家重点关注 rtx,pinyin,chn_name 这三个字段,其他都是辅助字段,不参与查询业务。...如上,索引完美命中,效率喜人,那么中文怎么办?...%查询中文名字段; 关键字查询接口返回结果做Redis缓存,缓存时间为120分钟; 所以我的解决方式:使用全文索引优化rtx和拼音的模糊查询,中文的模糊查询继续使用**LIKE %%**,最后再加一个Redis

34.5K2216
  • MySQL 大表如何优化查询效率?

    MySQL 大表如何优化查询效率? 背景 XX 实例(一主一从)xxx 告警中每天凌晨在报 SLA 报警,该报警的意思是存在一定的主从延迟。...(若在此时发生主从切换,需要长时间才可以完成切换,要追延迟来保证主从数据的一致性) XX 实例的慢查询数量最多(执行时间超过 1s 的 SQL 会被记录),XX 应用那方每天晚上在做删除一个月前数据的任务...: 最近一个星期内,总共记录的慢查询执行花费时间为 25403s,最大的慢 SQL 执行时间为 266s,平均每个慢 SQL 执行时间 5s,平均扫描的行数为 1766 万。...**优化方法也是:**建立单独索引 indx_receive_time(receive_time)。 测试 拷贝 arrival_record 表到测试实例上进行删除重新索引操作。...delete 大表优化为小批量删除 应用端已优化成每次删除 10 分钟的数据(每次执行时间 1s 左右),xxx 中没在出现 SLA(主从延迟告警): 另一个方法是通过主键的顺序每次删除 20000 条记录

    1.3K10

    MySQL 模糊查询:MySQL 数据库 like 语句通配符模糊查询小结

    MySQL 报错:Parameter index out of range (1 > number of parameters, which is 0)——MySQL 数据库 like 语句通配符模糊查询小结...文章目录 MySQL 报错:Parameter index out of range (1 > number of parameters, which is 0)——MySQL 数据库 like 语句通配符模糊查询小结...前言 一、分析 SQL 语句 1.1、普通 SQL 语句的查询分析 1.2、普通 SQL 查询语句如何处理 1.3、使用 like 通配符模糊查询语句分析 二、like 语句使用通配符模糊查询剖析 2.1...、like 语句的应用场景 2.2、模糊查询剖析 2.3、正确语句 三、MyBatis like 模糊查询及关键字区分 总结 ---- 前言 今天在使用 MySQL 语句执行增删改查操作时,控制台报出了以下错误...二、like 语句使用通配符模糊查询剖析 2.1、like 语句的应用场景 使用 like 通配符进行模糊查询是我们在项目中常遇到的,比如在搜索框中对于数据的模糊查询。

    18.8K40

    Mysql 模糊查询 like 语句

    mysql模糊查询like语句 like语句用于模糊查询符合条件的语句 %代表 若干个字符 _代表一个单词 查询使用like语句的语法是: select 字段名 from 表名 where 字段名...like '需要模糊查询的对象' 如果需要查询第二位字母是q的字段,那么like后面可以跟'_q%' 如果需要模糊查询的字符当中有'_',那么可以使用转义字符。...如果需要查询第二位字符是_的字段,那么like后面可以跟 '__%' 例如,我们现在有如下的一张表 +-------+--------+----------+------+------------+-...'M' 的人的姓名的时候,我们可以使用以下语句进行查询。...select ename from emp where ename like '_m%'; 使用上述语句查询的结果为 +-------+ | ename | +-------+ | SMITH | +-

    7.4K30

    Mysql 多表联合查询效率分析及优化

    中涉及到多表查询的时候,需要根据查询的情况,想好使用哪种连接方式效率更高。...MySQL如何优化LEFT JOIN和RIGHT JOIN 在MySQL中,A LEFT JOIN B join_condition执行过程如下: 1)· 根据表A和A依赖的所有表设置表B。...4)· 可以对所有标准联接进行优化,只是只有从它所依赖的所有表读取的表例外。如果出现循环依赖关系,MySQL提示出现一个错误。 5)· 进行所有标准WHERE优化。...联接优化器计算表应联接的顺序。LEFT JOIN和STRAIGHT_JOIN强制的表读顺序可以帮助联接优化器更快地工作,因为检查的表交换更少。...请注意这说明如果执行下面类型的查询,MySQL进行全扫描b,因为LEFT JOIN强制它在d之前读取: SELECT * FROM a,b LEFT JOIN c ON (c.key=a.key) LEFT

    5.1K41

    【愚公系列】2021年12月 Mysql数据库-模糊查询like效率问题和优化方案

    文章目录 前言 一、模糊查询like效率 二、更高效的写法 1.索引 2.LOCATE('substr',str,pos)方法 3.POSITION('substr' IN `field`)方法 4.INSTR...(`str`,'substr')方法 5.FIND_IN_SET(str1,str2)方法 总结 前言 这篇文章主要向大家介绍Mysql模糊查询like效率,以及更高效的写法,主要内容包括基础应用、实用技巧...提示:以下是本篇文章正文内容,下面案例可供参考 一、模糊查询like效率 在使用msyql进行模糊查询的时候,很天然的会用到like语句,一般状况下,在数据量小的时候,不容易看出查询的效率,但在数据量达到百万级...这个时候查询的效率就显得很重要。...keyword' )>0 5.FIND_IN_SET(str1,str2)方法 SELECT * FROM `person` WHERE FIND_IN_SET('apply',`name`); 总结 like优化大部分写法都是返回索引位置来提升查询效率

    1.4K20

    开启MYSQL慢查询日志,监控优化SQL效率

    一、安装登录MYSQL 1、下载地址:MYSQL官网(直接next安装即可) 2、安装完成后点击如下图所示输入密码进行登录操作 ?...登录成功 二、查看是否开启了慢查询日志 输入命令【show variables like 'slow_query_log'】,页面会显示是否开启了慢查询日志,slow_query_log =ON,代表已经开启...监控阈值 五、设置set global为全局生效 1.set global 只是全局session生效,重启后失效,如果需要以上配置永久生效,需要做如下配置 MySQL在Windows系统中的配置文件一般是是...my.ini找到[mysqld]下面加上 log-slow-queries = F:\MySQL\log\mysqlslowquery.log long_query_time = 2 2.执行命令show...日志路径 3.显示的日志记录在/apps/logs/mysql/slow3306.log目录 4.测试结果 ? 结果 5.查询日志记录 ? 日志记录

    3.1K20

    MySQL索引优化:如何提高查询效率和性能

    MySQL索引优化是提高查询效率和性能的关键。在处理大量数据和复杂查询时,合理设计和使用索引可以显著提升数据库的响应速度和吞吐量。下面将详细介绍如何进行MySQL索引优化并提供一些建议。...高频率的查询列和经常用于连接的外键列通常是索引的最佳选择。 2、根据列的基数(不同值的数量)选择索引,基数越大,索引的选择性越好,提高查询效率。...五、定期分析和优化索引 1、使用MySQL提供的EXPLAIN语句来分析查询执行计划,查看是否正确使用了索引。 2、使用OPTIMIZE TABLE命令可以修复索引碎片,提高索引的性能。...3、定期监控数据库的性能指标,如查询响应时间、慢查询日志等,针对性地进行调整和优化。 六、其他优化技巧和注意事项 1、对于频繁更新的表,可以考虑禁用索引,待更新完成后再重新启用索引。...MySQL索引优化是提高数据库查询效率和性能的重要手段。

    3.1K30

    如何加快MySQL模糊匹配查询

    有时我会看到条件如下的模式匹配查询:“其中的字段名像'%something%'”。 MySQL不能为这些查询使用到索引,这意味着它必须每次都进行一次全表扫描。...通过以下查询,我们可以使用n.pierre查找所有email地址: ? ? 它不必读取整个表格,但仍需要读取很多行,甚至使用filesort。...由于前导%,MySQL不能使用索引。 我们如何避免这种情况? 让我们保存我们可能要查找的email地址的所有可能版本。 短路方法 ? 嗯...可以工作吗? 我们来测试一下。...结论 如果MySQL中没有内置的解决方案或索引可以帮助或解决您的问题,请不要放弃。很多时候,只需稍作修改,您就可以创建自己的索引表或使用其他技巧。...在这种特殊情况下,如果您愿意牺牲一些额外的磁盘空间,您可以使用正确的方法加快查询速度。 Trigram并不是最好的选择,但我可以看到可能更好的用例。

    5.2K50

    MySQL · 性能优化 · 提高查询效率的实用指南(上)

    然而,随着使用的普及,MySQL在实际应用中也暴露出了一些常见问题,尤其是当SQL语句不够优化时,可能会导致响应时间慢、CPU使用率高等性能瓶颈问题。...MySQL会自动将字符串转换为数字再进行比较,这会导致索引失效,进而影响查询性能。优化方案:为避免隐式转换,应确保查询变量与字段类型一致。...因此,查询效率会大幅下降。通过确保查询条件与字段类型一致,可以避免不必要的转换操作,从而提升查询效率。...关联更新、删除错误用法:虽然MySQL 5.6引入了物化特性来优化查询性能,但对于更新或删除操作,仍需手工重写为JOIN,以提高执行效率。...ASC,a.appraise_time DESCLIMIT 0, 20;优化方案:可以将查询拆分为两个部分并合并结果,从而提高查询效率:SELECT*FROM((SELECT*FROMmy_order

    1.3K11

    MySQL · 性能优化 · 提高查询效率的实用指南(下)

    为了帮助最大限度地发挥MySQL的潜力,本指南将深入探讨避免10种常见错误的策略,从而提升查询效率和系统稳定性。...子查询效率低下错误用法:子查询是SQL查询中的一种常见操作,但在MySQL中,直接使用子查询往往会导致性能问题。...优化方案:可以将子查询改写为JOIN,从而提升查询效率:SELECTe....如果没有合适的索引,MySQL将不得不执行全表扫描,导致查询时间大幅增加。通过为连接列添加索引,MySQL可以快速定位匹配的行,从而显著提高查询效率。...通过避免常见的SQL错误用法,如不合理的LIMIT语句、隐式转换、子查询、以及不适当的索引设计等,开发者可以显著提升MySQL的查询效率和系统的整体性能。

    1.9K21

    O(1)效率的表面模糊算法优化。

    很久没有写文章了,主要是最近一段时间没有以前那么多空暇空间,内存和CPU占用率一致都很高,应前几日群里网友的要求,今天发个表面模糊的小程序来找回之前写博客的热情吧。      ...国内我认为,破解表面模糊的原理的最早作者是我一直很崇拜的一位女士,她不会编程,英文也不怎么好,仅凭计算器和Excel两个工具破解了PS了很多  算法,真是个巾帼英雄。      .../2012/11/06/2756441.html       用C实现的参考:http://blog.csdn.net/maozefa/article/details/8270990       表面模糊是属于典型的...首先,表面模糊有两个参数,半径Radius和阈值Threshold。...测试结果为250ms,又快了一点点,为什么呢,我分析认为第一是减少了循环计数的时间,第二循环展开的 乘以 常数会被CPU优化为相关的移位或其他操作,而Calc2内部编译器是无法优化的。

    1.5K60

    Mysql全文索引实现模糊查询

    导语 基本上所有的产品都离不开模糊搜索,无论是C端的社交产品、或者B端的一些SaaS服务。...众所周知的问题是,LIKE命令在数据量大的时候性能特别低,甚至大数据量下的一个LIKE查询可以拖垮整个DB,这是因为LIKE语句是不能利用索引的。...如果也借用ES这一套来做当然是可以的,但是从开发时间和精力的角度,显然有点得不偿失,那么在这种场景下,我们如何实现模糊搜索。...ngram_token_size设置的是查询的单词最小字数,也就是如果在默认值是2的情况下,搜索单字是得不到任何结果的。譬如上单独搜索'今','天','真','好'这四个字都是拿不到结果的。...8 | 昨天天气真好 | NULL | | 9 | 昨天天气真好 | NULL | +----+-----------------------+------+ 查询语句

    14.9K41

    SQL中查询效率优化

    当我们使用索引和不使用索引的时候,效率会相差相当大,特别是当数据量越来越大的时候。...另外需要注意的是并不是我们在where条件里面用有索引的字段进行筛选数据库在查询的时候就会走索引,有些写法会让数据库不走索引,接下来会总结一些会让查询进行全表扫描而不走索引的写法; 提防ORACLE中的数据隐式转换...,'文') >0来进行查询。...执行顺序 其实为什么要知道查询执行的逻辑顺序,原因很简单,为了尽量早的筛选出我们想要的数据,将不需要的数据进行计算是需要成本的,直观的表现就是查询变慢。...FROM多个表的时候将小表写在后面,在CBO优化器情况下默认是将后表当成驱动表的。 ---- 写SQL简单,优化SQL难,数据分析师之路长的很,慢慢走~ peace~

    4K30
    领券