首页
学习
活动
专区
圈层
工具
发布
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    数据库压缩备份提高备份效率

    背景     在数据库的备份过程中有很多参数,前几日发现公司的备份数据库job运行的很慢,就去研究了一下,发现在备份程序中都没有启用压缩,加上压缩以后有发现效率提高了不少,本篇就几个压缩相关的参数来看一下备份数据库的过程中如何提高备份的效率...代码实现     为了更好地了解数据库备份,我们首先要知道代码以及参数的含义。...普通代码: BACKUP DATABASE ‘备份数据库名称’ TO DISK = '地址+bak文件名称' ; 加快备份进度的几个关键参数: 1.BUFFERCOUNT--指定用于备份操作的 I/O...2> 对已启用压缩的数据库进行压缩备份,CPU消耗会变得更高 压缩主要因素包括: 1.数据类型。字符数据的压缩率要高于其他类型的数据。 2.数据重复的比例越高压缩越好,类似于数据库压缩(页压缩)。...通常,如果某页包含多个行,而其中的某个字段包含相同的值,则该值可获得较大的压缩。相反,对于包含随机数据或者每页只有一个很大的行的数据库,压缩备份的大小几乎与未压缩的备份相同。

    6.8K90

    Linux自动备份mysql数据库|mysql备份

    文章时间:2019年1月31日 08:49:46 作者:余伟同学 说明:利用crotab定时器,实现定时自动备份mysql数据库 更新人 更新时间 更新内容 余伟同学 2019年10月10日...12:30:57 增加复杂版本sh,7天自动删除 安装crotab 安装教程地址:https://wiki.nooss.cn/archives/84.html 编写备份mysql的shell脚本 #简单版本...###################数据库配置信息####################### user=root passwd=root dbname=databases mysql_back_path...-p$passwd $dbname > $mysql_back_path/$time.sql.gz echo '数据库备份完成' find /home/dbback/ -mtime +3 -name..."*.sql.gz*" -exec rm -rf {} \; #删除3天以上的备份sql echo '检查删除过期备份数据库成功' 说明 -u 后面跟的是用户名 -p 后面跟的是密码 datebaes

    27.8K21

    MySQL数据库备份之逻辑备份

    一、MySQL数据库备份之逻辑备份 1.命令简介: # mysqldump -h 服务器 -u用户名 -p密码 数据库名 > 备份文件.sql 1)关于数据库名:   -A, --all-databases...停止数据库   【systemtl stop mysqld 】 2. 清理环境     【rm -rf /var/lib/mysql/*;】 3....启动数据库    【初始密码 /var/log/mysqld.log】 4. 重置密码     【新密码 】 5. mysql恢复数据  【新密码 】 6....刷新授权     【备份时密码 】 注:如果不是一个新的数据库环境,我们需要从第一步开始,如果已经是一个新的数据环境,我们可以直接从第5步执行。...[root@localhost ~]# 可以看到它恢复到了备份点,刚才创建的表t2是在备份点之后生成的,可以看到表中没有t2: mysql> show databases; +------------

    15.9K10

    备份压缩问题:备份文件压缩设置不当,导致备份失败

    选择合适的压缩工具不同的压缩工具具有不同的性能和压缩率,选择适合的工具可以避免备份失败。(1)推荐工具gzip:通用性强,支持快速压缩。bzip2:压缩率较高,但速度较慢。...优化压缩参数根据备份文件的特点和系统资源限制,调整压缩参数以平衡压缩率和性能。...(1)gzip 示例# 使用 gzip 压缩备份文件(默认压缩级别为 6)tar -czf /backup/full_backup_20250207.tar.gz /source/directory.../source/directory (2)xz 示例# 使用 xz 压缩备份文件(默认压缩级别为 6)tar -cJf /backup/full_backup_20250207.tar.xz /source.../bin/bash # 压缩并记录日志compress_backup() { echo "开始压缩备份文件..."

    1.9K10

    MYSQL 8.0 XTRABACKUP 备份压缩与部分表恢复

    ​ MYSQL 8.0后,XTRABACKUP 的参数有哪些变化,如果是通过XTRABACKUP 来备份那些参数的意义在哪里,是不是需要进行调整 1 compress 在XTRABACKUP 进行文件的备份时...qp 从上图两个备份方式的比较上为压缩备份,下为非压缩备份,可以看到压缩后的备份的确是某些文件缩减了10倍。 ...CPU在备份的压缩上。...--compress-threads  这个参数就是要保证你到底用多少的CPU 来进行数据的压缩 例如 那么估计会有人问,那你压缩完毕了,我怎么恢复数据库,是不是需要一个解压缩的过程,这个过程到底在哪里...mydumper来完成,而不是xtrabackup 下面我们看看 1 前提条件是你的mysql 必须是开启 innodb_file_per_table的 2 备份的方式也可以是1个表 一群表,或者一个数据库中的一组表

    4.3K20

    Mysql数据库定时备份

    Mysql数据库定时备份 背景 首先我不是DBA,我只是个后端开发,有一个自己的网站,突然有一天,听到有个同学说,他们数据库被黑了,别人黑完删库跑路了,请教我怎么恢复,同学是非开发人员,其实我很想说我也不会...我快速百度了下怎么恢复,网上教我们的手段一般有: 数据库备份了么? 同学说没有,pass。 日志开启了么? 同学说没有,pass。 你数据库是MyIsam,看看黑客有没有把文件转移?...所以,我赶紧把我的mysql数据库备份了一下,用最简单的方式。 内容过于简单,可能会引起部分人群不适。...简单备份 mysqldump -u root -p feiyun > feiyun.sql.20190507 这里,feiyun 是数据库名,-u 是指定用户名, -p是输入密码 , -> 重定向到文件...定时备份 cron中添加一个作业 # crontab –e 0 1 * * * /root/dump/backup.sh 每天1点执行下backup.sh backup.sh: #!

    6.6K30

    Mysql数据库定时备份

    MySQL数据备份 mysqldump命令备份数据 在MySQL中提供了命令行导出数据库数据以及文件的一种方便的工具mysqldump,我们可以通过命令行直接实现数据库内容的导出dump,首先我们简单了解一下...mysqldump命令用法: #MySQLdump常用 mysqldump -u root -p --databases 数据库1 数据库2 > xxx.sql mysqldump常用操作示例 备份全部数据库的数据和结构.../mydb.sql 备份单个数据库的数据和结构(,数据库名mydb) mysqldump -uroot -p123456 mydb > /data/mysqlDump/mydb.sql 备份单个数据库的结构.../mydb.sql 还原mysql备份内容 有两种方式还原,第一种是在MySQL命令行中,第二种是使用SHELL行完成还原 在系统命令行中,输入如下实现还原: mysql -uroot -p123456...以下代码功能就是针对mysql进行备份,配合crontab,实现备份的内容为近一个月(31天)内的每天的mysql数据库记录。

    11.7K20

    YashanDB数据库无损压缩及备份技术

    如何实现高效的数据压缩以减少存储成本,同时保证数据完整性不受影响,是数据库设计和维护中的关键技术问题。...本文围绕YashanDB数据库系统中的无损压缩技术和备份方案进行深入技术分析,详细阐述其实现原理、功能优势及操作建议,帮助数据库管理员和开发人员系统地理解和应用相关技术。...备份恢复及基于时间点恢复(PITR)YashanDB备份恢复流程严格依赖备份集及归档日志二者协同,实现数据库完整一致性恢复。...结论近年来,YashanDB数据库通过集成成熟的无损压缩机制和灵活高效的备份策略,显著提升了大规模数据的存储利用率和业务数据的安全可靠性。...未来,随着数据规模和应用场景的持续扩展,YashanDB将继续优化压缩算法和备份恢复体系,以适应更高的性能要求和更灵活的运维需求,推动数据库技术向智能化和自动化方向发展。

    40110

    MySQL数据库备份实操

    基础环境搭建 本文相关环境均基于docker实现,下面是启动一个最基本的mysql数据库: docker run --name mysql-dump-test -p 3306:3306 -e MYSQL_ROOT_PASSWORD...全量备份 全量备份基本模式: 进入到mysql容器中 创建备份目录 通过mysqldump命令,执行数据库逻辑备份操作,将结果输出到 sql文件中。...,保持备份数据一致性 --master-data=2 表示在备份过程中记录主库的binlog和pos点,并且在dump文件中注释改行 --all-databases 导出所有数据库,包括mysql库 全量恢复...mysql -h localhost -u root -p < /data/backups/dmp/dmp1.sql 其他备份 1、导出指定数据库的指定表: --databases 指定备份的数据库 -...:/etc/mysql # 重启mysql数据库 docker restart mysql-dump-test # 查看日志情况 docker logs mysql-dump-test 参考资料 欢迎关注我的公众号

    1.5K40

    使用Xtrabackup备份MySQL数据库

    MySQL数据库备份工具 Xtrabackup有如下几大特点: (1)备份过程快速、可靠; (2)备份过程不会打断正在执行的事务; (3)能够基于压缩等功能节约磁盘空间和流量; (4)自动实现备份检验...---- 下面演示使用Xtrabackup对CentOS7系统上的MySQL数据库进行备份 先提前下载CentOS7版本的Xtrabackup RPM安装包 https://www.percona.com...7、接下来使用xtrabackup进行一次数据库的全量备份 创建数据库备份文件存放目录并使用xtrabackup的命令innobackupex进行全量备份 mkdir /backup innobackupex...chown -R mysql.mysql /usr/local/mysql/data/ 修改属主属组为mysql.mysql 重启mysqld服务后登录数据库验证数据库是否完全还原回来 ?...可以看到数据库全量备份还原成功 以上是Xtrabackup全量备份操作,下次介绍一下利用Xtrabackup进行增量备份

    2.4K80
    领券