首页
学习
活动
专区
圈层
工具
发布

数据库压缩备份提高备份效率

背景     在数据库的备份过程中有很多参数,前几日发现公司的备份数据库job运行的很慢,就去研究了一下,发现在备份程序中都没有启用压缩,加上压缩以后有发现效率提高了不少,本篇就几个压缩相关的参数来看一下备份数据库的过程中如何提高备份的效率...代码实现     为了更好地了解数据库备份,我们首先要知道代码以及参数的含义。...普通代码: BACKUP DATABASE ‘备份数据库名称’ TO DISK = '地址+bak文件名称' ; 加快备份进度的几个关键参数: 1.BUFFERCOUNT--指定用于备份操作的 I/O...2> 对已启用压缩的数据库进行压缩备份,CPU消耗会变得更高 压缩主要因素包括: 1.数据类型。字符数据的压缩率要高于其他类型的数据。 2.数据重复的比例越高压缩越好,类似于数据库压缩(页压缩)。...相反,对于包含随机数据或者每页只有一个很大的行的数据库,压缩备份的大小几乎与未压缩的备份相同。 总结:     不难发现,以上主要测试三个数据,在合理外围内越大越能提高效率。

6.8K90
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MariaDB数据库备份之逻辑备份

    在生产机器上通常是要备份数据库的,主要是防止重要数据丢失,这里就不细说为什么备份了,这篇文章是MariaDB数据库的逻辑备份 大概说一下备份方式吧 物理备份 这个方式就是拷贝物理文件备份: mariadb...的数据库,所以用 mysqldump即可 逻辑备份 逻辑备份,就是将数据库的数据以SQL语句的形式,导出备份 这个备份说白了就是SQL语句了 这个就用到 mysqldump 这个工具了,这个工具是数据库自带的...对于数据库数据只有 四五十GB的情况是没问题的,但超过了最好是用物理备份了 使用mysqldump 逻辑备份所有数据库 参数解释: -A 备份所有数据库 -B 备份单个或者多个数据库,也能指定备份某个数据库中的某个表...其他参数解释: -u 数据库用户 -p 数据库密码 “>” 将结果输出到指定名称指定位置下 备份所有数据库 命令格式: mysqldump -u你的用户 -p你的密码 -A>[备份到那个位置以及叫什么名...那种都可以但最后的结果是回复了 使用mysqldump 备份指定的一个数据库 备份某一个数据库 具体参数上面介绍的很清楚 我备份的是 world 数据库 mysqldump -uroot -p -

    6.7K20

    MySQL数据库备份之逻辑备份

    一、MySQL数据库备份之逻辑备份 1.命令简介: # mysqldump -h 服务器 -u用户名 -p密码 数据库名 > 备份文件.sql 1)关于数据库名:   -A, --all-databases...       所有库   school               数据库名   school stu_info t1 school  数据库的表stu_info、t1   -B, --databases...#同时启动各种高级选项   -R, --routines                #备份存储过程和存储函数   -F, --flush-logs              #备份之前刷新日志...刷新授权     【备份时密码 】 注:如果不是一个新的数据库环境,我们需要从第一步开始,如果已经是一个新的数据环境,我们可以直接从第5步执行。...,所有我们要执行此步骤,来实现与备份点密码一致。

    15.9K10

    Linux自动备份mysql数据库|mysql备份

    文章时间:2019年1月31日 08:49:46 作者:余伟同学 说明:利用crotab定时器,实现定时自动备份mysql数据库 更新人 更新时间 更新内容 余伟同学 2019年10月10日...12:30:57 增加复杂版本sh,7天自动删除 安装crotab 安装教程地址:https://wiki.nooss.cn/archives/84.html 编写备份mysql的shell脚本 #简单版本...%S).sql.gz #复杂版本 ########文件名称为当天时间############# time=`date '+%y-%m-%d %H:%M:%S'` echo $time echo '开始备份数据库...-p$passwd $dbname > $mysql_back_path/$time.sql.gz echo '数据库备份完成' find /home/dbback/ -mtime +3 -name..."*.sql.gz*" -exec rm -rf {} \; #删除3天以上的备份sql echo '检查删除过期备份数据库成功' 说明 -u 后面跟的是用户名 -p 后面跟的是密码 datebaes

    27.8K21

    别让备份链拖垮你的恢复:增量备份和差异备份,选错一个慢三倍

    别让备份链拖垮你的恢复:增量备份和差异备份,选错一个慢三倍 如果你是个运维,正被RPO和RTO搞得焦头烂额,每天盯着备份任务跑完,却不敢真去测恢复速度,那你得往下看。...但差异备份,全量恢复时间40分钟,差异恢复时间10分钟,RTO = 40 + 10 = 50分钟。差了110分钟。 实测数据:100GB数据,增量恢复慢3倍 我们实验室做过一个测试。...30天后恢复:增量备份RTO = 35 + 30*3.5 = 140分钟。差异备份RTO = 35 + 8 = 43分钟。增量备份的恢复时间比差异备份慢3.25倍。...我有个朋友在金融公司做运维,他们有个核心业务数据库,每天增量备份,数据量500GB。有次磁盘故障,恢复时发现第15个增量文件损坏,导致后面所有增量都无法应用。...最后说一句:没有完美的备份策略,只有最适合你业务场景的方案。增量备份省存储,但恢复慢;差异备份费存储,但恢复快。选之前,先搞清楚你的RTO底线是多少。

    40810

    数据库备份相关

    命令就来了~ 备份文件(默认备份+压缩备份),提醒一下,压缩备份速度更快==》对,我没有写错,压缩备份速度更快,体积更小【下面有证明的图】==》只是占的CPU更多而已(大概是5倍)。...具体的就看个人业务需求了,我反正是凌晨执行压缩备份所以无所谓 backup database MyBlog to disk=N'G:\1.bak' with name=N'完整备份',description...=N'2017完整备份' backup database MyBlog to disk=N'G:\2.bak' with name=N'完整备份-压缩',description=N'2017完整备份-压缩...网上大多数文章都没说,其实备份完成了最好检查一下 ? 检查备份是否有效 restore verifyonly from disk=N'G:\1.bak' ?...还原数据库: restore database MyBlog from disk=N'G:\1.bak' ?

    4.6K90

    故障分析 | 血的教训-由慢查询引发的备份等待导致数据库连接打满

    于是带着疑问,1、要么有长事务没有提交,2、要么有大的慢查询阻塞 备份原理: 备份流程图大致如下: 1、根据链接信息做数据库的连通性和版本检测 2、读取数据库相关的配置信息(数据和日志文件位置等信息)...结论:事务中的慢查询会阻塞备份 场景3:模拟不带事务慢查询是否阻塞备份 序号-时间线 trx-1 backup 1 select id,sleep(1000) from tb1; 2 /usr/bin...1点开始备份,也就是说这个备份一直在等待这个查询结束,符合场景3 检查数据库的 sql 超时是否设置 mysql> show variables like '%exec%'; +------------...,业务库的增删改查操作尽量优化到<0.2秒; 2、数据库层面:设置慢查询执行超时时间,超过了一定时间强制 kill 掉,比如查过20分钟,对于 OLTP 业务,如果一个 sql 20分钟没有执行完,那就不是...本文关键字:#备份# #慢查询# #slow# #锁表#

    79230

    故障分析 | 血的教训-由慢查询引发的备份等待导致数据库连接打满

    于是带着疑问,1、要么有长事务没有提交,2、要么有大的慢查询阻塞 备份原理: 备份流程图大致如下: [mawenbin0505-1.png] 1、根据链接信息做数据库的连通性和版本检测 2、读取数据库相关的配置信息...结论:这个没提交的写事务是不会阻塞备份 场景2:模拟事务中的慢查询是否阻塞备份 [表格] 我们可以看到,直到sql执行超时,也就是意味着表关闭了,备份才成功。...结论:事务中的慢查询会阻塞备份 场景3:模拟不带事务慢查询是否阻塞备份 [表格] 我们可以看到,直到sql执行超时,也就是意味着表关闭了,备份拿到了备份锁,备份才成功。...1点开始备份,也就是说这个备份一直在等待这个查询结束,符合场景3: 检查数据库的sql超时是否设置 mysql> show variables like '%exec%'; +-------------...,业务库的增删改查操作尽量优化到<0.2秒 2.数据库层面:设置慢查询执行超时时间,超过了一定时间强制kill掉,比如查过20分钟,对于OLTP业务,如果一个 sql 20分钟没有执行完,那就不是 OLTP

    75310

    Navicat备份数据库

    @[toc] 简介 本文关键词 Navicat、数据库备份、数据安全、备份策略、SQL备份、文件备份、定时备份、备份恢复、数据库管理、数据恢复 实现步骤 1 发现问题 1.1 问题描述 在日常数据库管理中...为了防止数据丢失或损坏,定期备份数据库是必不可少的操作。本文将详细介绍如何使用Navicat工具进行数据库备份。...1.2 问题描述 数据库备份是数据管理中的基础操作,但在实际操作中,可能会遇到备份失败、备份文件损坏等问题。本文将通过详细的步骤指导,帮助用户顺利完成数据库备份。...2 定位问题 2.1 触发时机 数据库备份通常在以下几种情况下进行: 定期备份:每日、每周或每月进行一次全量备份。 数据更新后:在重要数据更新后立即进行备份。...选择数据库:在左侧导航栏中,选择需要备份的数据库。 打开备份工具:点击顶部菜单栏中的“工具”选项,然后选择“备份”。 配置备份选项: 备份类型:选择“完整备份”或“增量备份”。

    2K10

    数据库备份拿webshell

    然后发现有数据库备份,这网站基本凉了: ?...通过前面的信息我们可以看到这是asp+iis的站点,但是数据库备份的地点原始数据库不能更改但是备份数据库的可以更改,这比较简单,突破一下,抓包改一改就行。...然后现在我们先要上传一个图片的木马为数据库备份做准备,为啥呢?...简单说一下数据库备份拿shell的原理,数据库备份是为网站管理者提供备份数据的功能,网站管理者可以将指定位置的文件进行备份,但是为了安全,网站后台都是不允许我们自己指定位置的,比如我们现在这个,但是这个一看就是在前台加的限制...,后台没有校验,所以我们可以向上传一个写入小马的图片文件,然后得到他的路径,在将这个路径进行数据库备份,备份是指定w为asp后缀就行。

    2.6K30

    Mysql数据库定时备份

    Mysql数据库定时备份 背景 首先我不是DBA,我只是个后端开发,有一个自己的网站,突然有一天,听到有个同学说,他们数据库被黑了,别人黑完删库跑路了,请教我怎么恢复,同学是非开发人员,其实我很想说我也不会...我快速百度了下怎么恢复,网上教我们的手段一般有: 数据库备份了么? 同学说没有,pass。 日志开启了么? 同学说没有,pass。 你数据库是MyIsam,看看黑客有没有把文件转移?...所以,我赶紧把我的mysql数据库备份了一下,用最简单的方式。 内容过于简单,可能会引起部分人群不适。...简单备份 mysqldump -u root -p feiyun > feiyun.sql.20190507 这里,feiyun 是数据库名,-u 是指定用户名, -p是输入密码 , -> 重定向到文件...定时备份 cron中添加一个作业 # crontab –e 0 1 * * * /root/dump/backup.sh 每天1点执行下backup.sh backup.sh: #!

    6.6K30
    领券