首页
学习
活动
专区
圈层
工具
发布

mysql blob查询速度慢

基础概念

MySQL中的BLOB(Binary Large Object)是一种数据类型,用于存储大量的二进制数据,如图像、音频、视频等。BLOB类型有四种:TINYBLOB、BLOB、MEDIUMBLOB和LONGBLOB,它们的区别在于能存储的最大数据量不同。

查询速度慢的原因

  1. 数据量大:BLOB类型的数据通常较大,查询时需要读取大量数据,导致查询速度慢。
  2. 索引不足:如果BLOB列没有适当的索引,查询时需要进行全表扫描,效率低下。
  3. 磁盘I/O性能:磁盘I/O性能直接影响查询速度,如果磁盘I/O性能差,查询速度也会受到影响。
  4. 网络传输:如果BLOB数据需要通过网络传输,网络带宽和延迟也会影响查询速度。

解决方法

  1. 分表存储:将BLOB数据单独存储在一个表中,只在主表中存储BLOB数据的引用(如文件路径),这样可以减少主表的查询负担。
  2. 分表存储:将BLOB数据单独存储在一个表中,只在主表中存储BLOB数据的引用(如文件路径),这样可以减少主表的查询负担。
  3. 使用外部存储:将BLOB数据存储在外部存储系统(如对象存储服务),只在数据库中存储文件的引用。
  4. 使用外部存储:将BLOB数据存储在外部存储系统(如对象存储服务),只在数据库中存储文件的引用。
  5. 索引优化:如果必须在数据库中存储BLOB数据,可以考虑对BLOB列的前缀进行索引。
  6. 索引优化:如果必须在数据库中存储BLOB数据,可以考虑对BLOB列的前缀进行索引。
  7. 优化磁盘I/O:使用高性能的存储设备,如SSD,或者使用RAID配置提高磁盘I/O性能。
  8. 网络优化:如果BLOB数据需要通过网络传输,确保网络带宽充足,并考虑使用CDN等技术减少网络延迟。

应用场景

BLOB类型通常用于存储多媒体文件、二进制文件等大数据量内容。例如:

  • 图片库
  • 音频/视频存储
  • 大型文档存储

参考链接

通过以上方法,可以有效提高MySQL中BLOB数据的查询速度。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

专业解决 MySQL 查询速度慢与性能差!

1.2 风险分析 QPS: QueriesPerSecond意思是“每秒查询率”,是一台服务器每秒能够相应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。...推荐阅读:面试问烂的 MySQL 查询优化,看完吊打面试官! 2.4.2 特性二:支持行级锁 1、InnoDB支持行级锁。 2、行级锁可以最大程度地支持并发。 3、行级锁是由存储引擎层实现的。...sort_buffer_size 定义了每个线程排序缓存区的大小,MySQL在有查询、需要做排序操作时才会为每个缓冲区分配内存(直接分配该参数的全部内存); join_buffer_size 定义了每个线程所使用的连接缓冲区的大小...,如果一个查询关联了多张表,MySQL会为每张表分配一个连接缓冲,导致一个查询产生了多个连接缓冲; read_buffer_size 定义了当对一张MyISAM进行全表扫描时所分配读缓冲池大小,MySQL...有查询需要时会为其分配内存,其必须是4k的倍数; read_rnd_buffer_size 索引缓冲区大小,MySQL有查询需要时会为其分配内存,只会分配需要的大小。

2K20

专业解决 MySQL 查询速度慢与性能差

什么影响了数据库查询速度 1.1 影响数据库查询速度的四个因素 ?...1.2 风险分析 QPS: QueriesPerSecond意思是“每秒查询率”,是一台服务器每秒能够相应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。...sort_buffer_size 定义了每个线程排序缓存区的大小,MySQL在有查询、需要做排序操作时才会为每个缓冲区分配内存(直接分配该参数的全部内存); join_buffer_size 定义了每个线程所使用的连接缓冲区的大小...,如果一个查询关联了多张表,MySQL会为每张表分配一个连接缓冲,导致一个查询产生了多个连接缓冲; read_buffer_size 定义了当对一张MyISAM进行全表扫描时所分配读缓冲池大小,MySQL...有查询需要时会为其分配内存,其必须是4k的倍数; read_rnd_buffer_size 索引缓冲区大小,MySQL有查询需要时会为其分配内存,只会分配需要的大小。

2.2K10
  • 分分钟解决 MySQL 查询速度慢与性能差

    作者:唐立勇 出处:https://segmentfault.com/a/1190000013672421 ---- 一、什么影响了数据库查询速度 1.1 影响数据库查询速度的四个因素 ?...1.2 风险分析 QPS: QueriesPerSecond意思是“每秒查询率”,是一台服务器每秒能够相应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。...sort_buffer_size #定义了每个线程排序缓存区的大小,MySQL在有查询、需要做排序操作时才会为每个缓冲区分配内存(直接分配该参数的全部内存); join_buffer_size #定义了每个线程所使用的连接缓冲区的大小...,如果一个查询关联了多张表,MySQL会为每张表分配一个连接缓冲,导致一个查询产生了多个连接缓冲; read_buffer_size #定义了当对一张MyISAM进行全表扫描时所分配读缓冲池大小,MySQL...有查询需要时会为其分配内存,其必须是4k的倍数; read_rnd_buffer_size #索引缓冲区大小,MySQL有查询需要时会为其分配内存,只会分配需要的大小。

    2.8K20

    大牛出招|分分钟解决 MySQL 查询速度慢与性能差

    作者:唐立勇 https://segmentfault.com/a/1190000013672421 一、什么影响了数据库查询速度 1.1 影响数据库查询速度的四个因素 ?...1.2 风险分析 QPS:Queries Per Second意思是“每秒查询率”,是一台服务器每秒能够相应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。...sort_buffer_size #定义了每个线程排序缓存区的大小,MySQL在有查询、需要做排序操作时才会为每个缓冲区分配内存(直接分配该参数的全部内存); join_buffer_size #定义了每个线程所使用的连接缓冲区的大小...,如果一个查询关联了多张表,MySQL会为每张表分配一个连接缓冲,导致一个查询产生了多个连接缓冲; read_buffer_size #定义了当对一张MyISAM进行全表扫描时所分配读缓冲池大小,MySQL...有查询需要时会为其分配内存,其必须是4k的倍数; read_rnd_buffer_size #索引缓冲区大小,MySQL有查询需要时会为其分配内存,只会分配需要的大小。

    7K21

    MySQL数据类型之TEXT与BLOB

    可以使用合成的(Synthetic)索引来提高大文本字段(BLOB或TEXT)的查询性能。...但是,要注意这种技术只能用于精确匹配的查询(散列值对于类似“=”等范围搜索操作符是没有用处的)。...合成的散列索引对于那些BLOB或TEXT数据列特别有用。用散列标识符值查找的速度比搜索BLOB列的本身速度快很多。 创建一张表,来介绍合成索引的使用方法。 ?...如果要查询context值为“beijingbeijing”的记录,则可以通过相应的散列值来查询 ? 这种做法只能用于精确匹配,在一定程序上减少了I/O,从而提高了查询效率。...在不必要的时候避免检索大型的BLOB或TEXT值。 把BLOB或TEXT列分离到单独的表中。

    4.6K30

    mysql 5.7 溢出页 FIL_PAGE_TYPE_BLOB

    其实代码里面存在 if (page_type == FIL_PAGE_TYPE_BLOB || page_type == FIL_PAGE_SDI_BLOB) 之类的代码基本上就能说明5.7的溢出页(FIL_PAGE_TYPE_BLOB...~但是还是水一篇~FIL_PAGE_TYPE_BLOBFIL_PAGE_TYPE_BLOB 的结构和FIL_PAGE_SDI_BLOB基本上一样, 只不过前者记录的是这一页存在多少数据, 而后者记录的是...不知道为啥这么设计, 没发现它两的优势.好了, 还是来看看FIL_PAGE_TYPE_BLOB的结构吧SIZE: 这个溢出页在本页中记录的大小.PAGENO: 下一页的pageno, 如果是4294967295...('>3LQ',self.read(20))if self.table.mysqld_version_id > 50744: # 8.0环境_tdata = first_blob(self.f,PAGENO...github.com/ddcw/ibd2sql/archive/refs/heads/main.zipunzip main.zipcd ibd2sql-mainpython3 main.py /data/mysql

    65420

    MySQL 中 blob 和 text 数据类型详解

    一直没详细介绍过 blob 及 text 类型,虽然这两类数据类型不太常用,但在某些场景下还是会用到的。本篇文章将主要介绍 blob 及 text 数据类型的相关知识。...1. blob 类型 blob(binary large object) 是一个可以存储二进制文件的容器,主要用于存储二进制大对象,例如可以存储图片,音视频等文件。...按照可存储容量大小不同来分类,blob 类型可分为以下四种: 类型 可存储大小 用途 TINYBLOB 0 - 255字节 短文本二进制字符串 BLOB 0 - 65KB 二进制字符串 MEDIUMBLOB...without a key length mysql> alter table tb_text add index idx_b (b); ERROR 1170 (42000): BLOB/TEXT...总结: 本篇文章介绍了 blob 及 text 字段类型相关知识。虽然数据库规范中一般不推荐使用 blob 及 text 类型,但由于一些历史遗留问题或是某些场景下,还是会用到这两类数据类型的。

    8.8K30

    MySQL排序速度慢而且可能不稳定

    研发同学反馈查询速度慢且排序不稳定。 排序不稳定的具体现象,有不少记录存在相同权重值,某条记录(假设id=100)第一页出现了,翻到第二页可能还有它(采用的limit控制哪一页)。 第1页数据 ?...赶紧搜索一下MySQL说明文档,第一条是排序优化 ? 文档中有这么一句话“如果索引不能满足ORDERBY子句,MySQL将执行文件排序(filesort)操作,读取数据行并对其进行排序。...文件排序构成查询执行中的额外排序阶段。” 显然,利用索引实现有序,比采用filesort更高效。filesort并不一定都通过磁盘排序,数据量不大的时候是在内存里完成。速度不够快的原因找到了。...MySQL文档中有这么一句话 “该查询连接了许多表,并且ORDER BY中的列并非全部来自用于检索行的第一个非恒定表。”,满足这类型的SQL也不能利用索引排序。这就是文章开头的例子。...MySQL官方建议可以调大排序缓存参数sort_buffer_size,MySQL 8.0还对缓存利用率做了优化,调大一点也不浪费。以前版本的MySQL可以求助DBA。

    2.8K30

    MySQL排序速度慢而且可能不稳定

    研发同学反馈查询速度慢且排序不稳定。 排序不稳定的具体现象,有不少记录存在相同权重值,某条记录(假设id=100)第一页出现了,翻到第二页可能还有它(采用的limit控制哪一页)。 第1页数据 ?...赶紧搜索一下MySQL说明文档,第一条是排序优化 ? 文档中有这么一句话“如果索引不能满足ORDERBY子句,MySQL将执行文件排序(filesort)操作,读取数据行并对其进行排序。...文件排序构成查询执行中的额外排序阶段。” 显然,利用索引实现有序,比采用filesort更高效。filesort并不一定都通过磁盘排序,数据量不大的时候是在内存里完成。速度不够快的原因找到了。...MySQL文档中有这么一句话 “该查询连接了许多表,并且ORDER BY中的列并非全部来自用于检索行的第一个非恒定表。”,满足这类型的SQL也不能利用索引排序。这就是文章开头的例子。...MySQL官方建议可以调大排序缓存参数sort_buffer_size,MySQL 8.0还对缓存利用率做了优化,调大一点也不浪费。以前版本的MySQL可以求助DBA。

    2.4K40

    MySQL 大对象(BLOB)和字符串的分身术

    MySQL 字段类型很多,我从 phpMyAdmin 5.1.1(一种开源的 MySQL 可视化工具)里找到了配置的所有 MySQL 字段类型,一共有 41 种。...MySQL 有一些字段类型是用同一个 C++ 类或通过继承同一个 C++ 类的方式实现的。...截止目前为止,我写的十几篇公众号文章,有多篇文章里写到了 MySQL 对于大对象(BLOB)、定长字符串、变长字符串的特殊处理逻辑。...今天我们就来详细说说大对象、定长 & 变长字符串对应着 MySQL 中的哪些字段类型? 本文内容基于 MySQL 5.7.35 源码。...Field_blob、Field_json、Field_geom 承载了 17 个字段类型的实现,那 MySQL 怎么区分这 3 个类实例化之后,到底对应着哪种类型的字段呢?

    1.8K40

    MySQL 子查询 嵌套查询

    MySQL 子查询 嵌套查询 一、带IN关键字的子查询 二、带EXISTS关键字的查询 三、带ANY、SOME 关键字的子查询 四、带ALL 关键字的查询 自言自语 一、带IN关键字的子查询 使用IN...关键字进行子查询的时候,内层查询语句仅仅返回一个数据列。...语法格式: SELECT 查询字段 FROM 表名 WHERE 字段名 [NOT] IN (SELECT 语句); 二、带EXISTS关键字的查询 意思就是内层的select查到了(至少查到了一行)才进行查询...,没有查到就不进行查询。...只要满足内层子查询中的任何一个比较条件,就返回一个结果作为外层查询的条件。 (满足任意一个) 语法格式: SELECT 查询字段 FROM 表名 WHERE 字段名 比较运算符(>,<..)

    17.7K40
    领券