首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何执行此数据库备份/清除任务?

问如何执行此数据库备份/清除任务?
EN

Database Administration用户
提问于 2014-07-09 03:49:19
回答 2查看 1.1K关注 0票数 1

我有一个3节点的MariaDB/Galera集群。我需要做两件事:

  1. 定期备份数据库(大小为多个),以进行正常的备份。
  2. 有一个经过消毒的版本,在该版本中,私有数据被混淆,键值被更改,以便分发给开发人员。(他们的想法是,每天他们都能获得一个新的“发展快照”,这是真实事物的内容和结构传真,但任何可能敏感的数据都会被净化,以开发为中心的设置也会被改变。

我知道如何做mysqldump,但恐怕这会锁定db。

我知道如何编写查询来混淆数据,但显然我不能在实时数据库上这样做。(我假设我需要将它导入到另一个数据库中.也许在一个单独的机器上,而不是在集群中?)

我需要这个脚本(我不害怕这样做,我只是不知道从哪里开始)。

有人能给我指明正确的方向吗?

EN

回答 2

Database Administration用户

发布于 2014-07-09 04:14:53

设置一个奴隶。

一旦一切都同步好了。

  • 停止从线程(sql线程)。
  • 将mysqldump从数据转储到orig.sql
  • 运行查询以修改数据
  • mysqldump再次转储到dev.sql
  • 使用orig.sql恢复数据
  • start slave从主目录恢复收集。

当然,这需要一些时间来处理一个大的db,但在我看来,这似乎是非常直接的。它根本不会锁定主集群(至少在创建从服务器之前)。如果只修改几个表,则可以调整mysqldump。

您可以使用cron操作并将其上传到s3或开发人员。使用一些快速的SSD。

票数 1
EN

Database Administration用户

发布于 2015-02-02 15:40:49

Matthew的答案确实很简单,但是有一个主要的缺点,那就是恢复部分,它可能需要花费几个小时在大型数据库上(从而增加复制增量)。

为了避免这一点,人们可以利用LVM快照。

我假设如下:

  • 数据库数据分区是一个逻辑卷(版本2,允许对快照卷进行写操作)
  • 卷组有足够的空间容纳快照卷
  • 安装了米舍尔德_多点 (默认情况下应该是)并配置了

程序改为(见下文重要说明):

  • 停止mysqld
  • 创建lvm快照卷
  • 启动mysqld (复制也开始,在主DB中保持数据同步)
  • 挂载lvm快照卷
  • 启动mysql2 (快照)实例,该实例使用挂载的快照目录作为datadir
  • mysqldump mysql2数据到orig.sql
  • 运行查询以修改mysql2上的数据
  • mysqldump再次转储到dev.sql
  • 停止mysql2
  • 卸载快照卷
  • 销毁快照卷

重要注意事项:我还没有亲自测试过这个过程,它可能需要调整和调整,而且您正在冒着自己的风险使用它。

票数 0
EN
页面原文内容由Database Administration提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://dba.stackexchange.com/questions/70019

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档