首页
学习
活动
专区
圈层
工具
发布

MYSQL INNODB表压缩

压缩前提 表压缩能提升性能,减少存储空间,主要是用在字符类型比较大的表上(VARCHAR,VARBINARY和BLOB和TEXT类型),且读多写少的情况下,如果你的应用是io密集型的,不是cpu密集型的...,那么压缩会带来很多性能的提升,例如:数据仓库。...DYNAMIC和COMPRESSED行格式是COMPACT行格式的变体,早期版本的InnoDB对数据库文件使用文件格式Antelope。...当超过这个临界值,mysql会为每个压缩页添加额外的空间来避免再次压缩失败。值为0表示禁用监控压缩效率,改为动态调整。...InnoDB未压缩的数据页是16K,根据选项组合值,mysql为每个表的.ibd文件使用1kb,2kb,4kb,8kb,16kb页大小,实际的压缩算法并不会受KEY_BLOCK_SIZE值影响,这个值只是决定每个压缩块有多大

10.7K40

MySQL表压缩和页压缩,难道只是空间压缩?

临近春节,相信每个公司都会进行全面巡检,无论是业务层还是数据库层,达到事前预防的目的;今天就来分享一下针对MySQL数据存储层面,在数据库存储来不及扩容的情况下,MySQL中的压缩方案; 日常工作中很多业务在表结构设计之初不会考虑存储的设计...而物理存储主要是考虑是否要启用表的压缩功能,默认情况下,所有表都是非压缩的。但说到压缩,总会下意识地认为压缩会导致 MySQL 数据库的性能下降。这个观点说对也不对,需要根据不同场景进行区分。...表压缩 数据库中的表是由一行行记录(rows)所组成,每行记录被存储在一个页中,在 MySQL 中,一个页的大小默认为 16K,一个个页又组成了每张表的表空间。...通常我们认为,如果一个页中存放的记录数越多,数据库的性能越高。这是因为数据库表空间中的页是存放在磁盘上,MySQL 数据库先要将磁盘中的页读取到内存缓冲池,然后以页为单位来读取和管理记录。...总之,COMPRESS 页压缩,适合用于一些对性能不敏感的业务表,例如日志表等 为了 解决压缩性能下降的问题,从MySQL 5.7 版本开始推出了 TPC 压缩功能,其利用文件系统的空洞(Punch Hole

4.5K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    第12期:压缩表性能监测

    上一篇(第11期:压缩表)已经了解了压缩表的相关概念、索引页的影响以及简单使用。这篇主要来介绍如何观测压缩表。 一、压缩表的使用场景分类 1....DELETE 业务 由于 MySQL 对删除的操作是直接写标记位,然后等待定期的 PURGE 线程清理,这块也适合用压缩表。 4....通过这些表可以监控到压缩表是否健康,是否需要调整压缩页,或者说是否适合用压缩表等。...接下来看看压缩表的监测的实际用例,使用单表空间建立两张表: t1 :未压缩表 t2 :page 为 4K 的压缩表 执行建表 mysql> create table t1(id int, r1 text...删除数据 重启 MySQL 实例,对压缩表 t2 进行删除与更新操作;或者清空表 INNODB_CMP 和 INNODB_CMP_PER_INDEX,也就是执行对应后缀为 _RESET 的表。

    1.7K30

    MySQL 8.0 InnoDB压缩行格式性能测试

    背景信息 多年前我对InnoDB表压缩格式做了个简单的测试,得到的结论大概是: InnoDB采用compressed行格式后,OLTP整体性能大约为原来的1/10,压缩率约为50%。...尝试过用TokuDB当做Zabbix的后端数据库,效果还不错,详情见 迁移Zabbix数据库到TokuDB。...ROWS=5000000 #每个表500万行数据 2.2.1 数据压缩率 未压缩格式(KB) 压缩格式(KB) 压缩率(1-压缩格式/未压缩格式) 59596904 40210556 34.03% 2.2.2...总结 根据上面的测试结果来看,如果是下面几种业务场景,则可以考虑使用InnoDB表想要使用compressed行格式: a) 对压缩比需求不是特别高,本案中,只压缩了 25% ~ 34% 数据量,优势不大...enjoy MySQL :) 全文完。

    1.8K30

    MYSQL 8.0 XTRABACKUP 备份压缩与部分表恢复

    --compress-threads  这个参数就是要保证你到底用多少的CPU 来进行数据的压缩 例如 那么估计会有人问,那你压缩完毕了,我怎么恢复数据库,是不是需要一个解压缩的过程,这个过程到底在哪里...mydumper来完成,而不是xtrabackup 下面我们看看 1 前提条件是你的mysql 必须是开启 innodb_file_per_table的 2 备份的方式也可以是1个表 一群表,或者一个数据库中的一组表...3 还原方没有同名的表 xtrabackup -usys -p1234.Com --socket=/data/mysql/mysql.sock --backup --target-dir=/data/...--tables="test_1" 2 在备份后对表进行export  xtrabackup --prepare --export --target-dir=/data/backup1 3 在需要恢复表的数据库上建立与表同样的表名和结构的数据表...4  然后直接  ALTER table 表名 discard tablespace; 将原有的表的表空间卸载 5  将备份文件夹下的表拷贝到目的数据库的文件夹下 6  ALTER TABLE 表名

    4.4K20

    MySQL 数据库表分区.

    MySQL 数据库在 5.1 版本时添加了对分区(partitioning)的支持。分区的过程是将一个表或索引分解成多个更小、更可管理的部分。...MySQL 数据库支持的分库类型为水平分区(指将同一表中不同行的记录分配到不同的物理文件中),并不支持垂直分区(指将同一表中不同列的记录分配到不同的物理文件中)。...MySQL 查看数据库分区。 SHOW VARIABLES LIKE '%partitions%'; MySQL 数据库支持以下几种类型的分区。...对于 OLAP(在线分析处理) 的应用,分区的确是可以很好地提高查询的性能,因为 OLAP 应用大多数查询需要频繁地扫描一张很大的表。假设有一张 1 亿行的表,其中有一个时间戳属性列。...我们通过 Navicat 来操作下数据库分区,表 -> 右键点击'设计表' -> 选项 -> 分割区,可以看到如下内容。 ? 来看看分区后,磁盘中 MySQL 数据库是怎么存储的。 ?

    13K20

    MySQL 搭建数据库表

    创建MySQL数据表需要以下信息: 表名 表字段名 定义每个表字段 语法 以下为创建MySQL数据表的SQL通用语法: CREATE TABLE table_name (column_name column_type...); 以下例子中我们将在 RUNOOB 数据库中创建数据表runoob_tbl: CREATE TABLE IF NOT EXISTS `runoob_tbl`( `runoob_id` INT...---- 通过命令提示符创建表 通过 mysql> 命令窗口可以很简单的创建MySQL数据表。你可以使用 SQL 语句 CREATE TABLE 来创建数据表。...实例 以下为创建数据表 runoob_tbl 实例: root@host# mysql -u root -p Enter password:******* mysql> use RUNOOB; Database...使用PHP脚本创建数据表 你可以使用 PHP 的 mysqli_query() 函数来创建已存在数据库的数据表。 该函数有两个参数,在执行成功时返回 TRUE,否则返回 FALSE。

    14.3K10

    MySQL 高性能表设计规范

    相关文章: MySQL高性能表设计规范:http://www.jianshu.com/p/f797bbe11d76 MySQL EXPLAIN详解:http://www.jianshu.com/p/ea3fc71fdc45...一、选择优化的数据类型 MySQL支持的数据类型非常多, 选择正确的数据类型对于获得高性能至关重要。...相反, 在反范式化的数据库中, 信息是冗余的, 可能会存储在多个地方。 范式的优点和缺点 为性能提升考虑时,经常会被建议对 schema 进行范式化设计,尤其是写密集的场景。...混用范式化和反范式化 在实际应用中经常需要混用,可能使用部分范式化的 schema 、 缓存表,以及其他技巧。 表适当增加冗余字段,如性能优先,但会增加复杂度。可避免表关联查询。...参考资料: 高性能mysql第三版

    1.3K20

    数据库性能优化(MySQL)

    11.1 查看数据库状态 可以通过show status、show innodb status 来查看MySQL数据库的状态,使用mysqlreport这个第三方工具可使数据库状态报告更好看(mysqlreport...11.2 正确使用索引 在影响数据库查询性能的众多因素中,索引绝对是一个重量级的因素,如果索引使用不当,则数据库的其它优化可能无济于事。...不论是MyISAM还是InnoDB引擎,查询缓存都可以很好地工作,起到提升性能的作用。查询缓存要注意缓存过期策略,在MySQL中,若一个表中有更新操作,则该表的所有查询缓存将失效。...若临时表的使用不可避免,那么也应该尽量减少临时表本身的开销。 MySQL的临时表可以创建在磁盘、内存和临时文件中。当然,创建在磁盘上的开销最大。...当然,为了保证数据库写性能可以异步写数据。若不想反范式则可以使用非关系型数据库。

    4.5K80

    MySQL 数据库和表操作

    MySQL服务器中的 【数据库】 以文件夹的形式存放在data目录下,本章讲解如何优雅地使用SQL命令操作数据库和数据表。...一、数据库操作 1.连接MySQL服务器 mysql -uroot -p mysql数据库类型有四个库 (information_schema,mysql,performance_schema,sys)...2.创建数据库 CREATE DATABASE 库名; #查看数据库 show databases; 3.指定数据库 若要操作数据库中的表或数据则需要先指定使用哪个库; #指定使用mysql库 USE...mysql; 如果想连接上数据库就可以使用某个库,可以在登录的时候指定库 #例如登录MySQL服务器 指定使用mysql库 mysql -uroot -p mysql #查看当前使用的库 SELECT...DROP DATABASE 库名; #查看数据库 show databases; 5.重命名数据库 MySQL 5.7 没有重命名库的SQL命令! 但是可以通过其他方式达到目的,例如备份...

    8K30

    MySQL数据库表的约束

    约束是为了安全插入数据,保证数据的合法性,防止无效数据进入数据库。它类似编译器语法提示,减少防止程序员在不知情的情况下插入错误数据。其中数据类型本身就是一种约束。...表的约束:表中一定要有各种约束,通过约束让我们未来插入数据库表中的数据是否合法的预期。本质通过技术手段倒逼程序员插入正确的数据。而站在MySQL视角,插入进来是数据一定是合法的。...为什么要约束:数据库是维护数据的最后一道防线,必须保证数据的完整性和可预期性。 1.null属性 在建表过程中,我们为数据类型添加时可以指定null或not null属性。...在数据库操作中,增删查改通常需要依赖主键,以确保数据的唯一性和操作的准确性。 在插入数据时不允许主键重复。...比如一个学生表和班级表的关系。 主表:班级表 从表:学生表 对于学生表,在clase_id这一列必须依赖于班级表中的id这一列,学生不能填一个不存在的班级。

    50510

    mysql数据库--表的操作

    1.创建表 按照上次的那个创建表的操作,我们创建完成之后首先就是去把这个use一下,即进入到这个表里面去; 然后我们就可以进行下面的创建表的操作; 上面这个就是进行创建表的指令: 首先还是使用这个mysql...-uroot -p进入到这个mysql里面,可以使用这个免密码的进入; create就是在创建表。...这个通过不断的拖动是可以实现的,读者可以下去自信的尝试; 想要进行这个查看,我们需要切换到像下面的这样的root账户下面,否则这个系统就会提醒我们,说我们没有这个对应的权限,切换完成之后,使用ls /var/lib/mysql...指令,这个里面就是我们的这个对应的库里面的表结构,我们所在的表就在这个打印结果里面; 因为我是在这个d3数据库的下面创建的表,因此我可以使用这个cd指令进入到对应的表的目录下面去,使用ls查看到了opt...,字段的类型,是否为空,默认值以及这个扩充的情况,后面我们都会学到; 其实这个数据库的所有信息都可以显示出来,包括我们创建这个数据库的操作,我们可以使用下面的show create table user1

    5K00

    MySQL ·查看数据库表详情

    MySQL 查看数据库表详情 查看所有数据库容量大小 select table_schema as '数据库', sum(table_rows) as '记录数', sum(truncate(data_length...记录数 数据容量(MB) 索引容量(MB) mysql 141892 7.36 0.17 tool_center 9288 1.56 0.01 liveservice-dev 605 0.30 0.04...在 mysql 中,使用 delete 命令删除数据后,会发现这张表的数据文件和索引文件却奇怪的没有变小。...这是因为 delete 操作并不会真的把数据删除,mysql 实际上只是给删除的数据打了个标记,标记为删除,因此你使用 delete 删除表中的数据,表文件在磁盘上所占空间不会变小,我们这里暂且称之为假删除...注意:在 optimize table 运行过程中,MySQL 会锁定表,所以要在空闲时段执行。

    19.8K30

    MYSQL数据库-表的约束

    零、前言 本章主要讲解学习MYSQl数据库中的表的约束 表的约束 真正约束字段的是数据类型,但是数据类型约束很单一,需要有一些额外的约束,更好的保证数据的合法性,从业务逻辑角度保证数据的正确性...包含班级名和班级所在的教室 如果班级没有名字,你不知道你在哪个班级,如果教室名字可以为空,就不知道在哪上课 所以在设计数据库表的时候,一定要在表中进行限制,满足上面条件的数据就不能插入到表中,这就是...示例: 索引: 在关系数据库中,索引是一种单独的、物理的对数据库表中一列或多列的值进行排序的一种存储结构,它是某个表中一列或若干列值的集合和相应的指向表中物理标识这些值的数据页的逻辑指针清单 索引的作用相当于图书的目录...这样可以使对应于表的SQL语句执行得更快,可快速访问数据库表中的特定信息 7、唯一键 一张表中有往往有很多字段需要唯一性,数据不能重复,但是一张表中只能有一个主键:唯一键就可以解决表中有多个字段需要唯一性约束的问题...建立外键的本质其实就是把相关性交给mysql去审核了,提前告诉mysql表之间的约束关系,那么当用户插入不符合业务逻辑的数据的时候,mysql不允许你插入

    9.8K30
    领券