首页
学习
活动
专区
圈层
工具
发布
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MySQL全量备份

    当数据库跑了较长时间后,存储的数据将越来越多,这时候往往也意味着,一旦数据库服务器出现宕机等相关状况,将给我们的业务带来巨大的影响,甚至可能是具备一定的毁灭性的,因此,即使对数据库进行备份是极其重要的。...接下来,我们一起来学习全量备份的实现方式。...环境说明: 数据库服务器:172.18.250.208 备用服务器:172.18.251.4 备份数据库服务器 首先,我们先在数据库服务器上创建一个数据库,并写入一些数据 [root@node1 ~]#...,否则一旦数据库服务器出现宕机等意外,就功亏一篑了。...Server [root@node2 ~]# yum -y install mariadb-server [root@node2 ~]# systemctl enable mariadb #注意,做全量恢复时

    2.6K30

    mysql全量数据迁移

    mydumper/loader 全量导入数据最佳实践 为了快速的迁移数据 (特别是数据量巨大的库),可以参考以下建议: mydumper 导出数据至少要拥有 SELECT,RELOAD,LOCK TABLES...导入示例及相关配置: mydumper 导出后总数据量 214G,单表 8 列,20 亿行数据 集群拓扑 TiKV * 12 TiDB * 4 PD * 3 mydumper -F 设置为 16,Loader...-t 参数设置为 64 结果:导入时间 11 小时左右,19.4 G/小时 从 MySQL 导出数据 我们使用 mydumper 从 MySQL 导出数据,如下: ....--skip-tz-utc 添加这个参数忽略掉 MySQL 与导数据的机器之间时区设置不一致的情况,禁止自动转换。.../var/test 导入成功之后,我们可以用 MySQL 官方客户端进入 TiDB,查看: mysql -h127.0.0.1-P4000 -uroot

    1.7K00

    Mysql手动全量增量迁移实战

    如果可以接受一定时间的停写,可以使用mysqldump+binlog的方式迁移数据 规划 8002库迁移全量加增量到8001库,增量迁移时8002库只读保证数据一致。...------+ | count(*) | +----------+ | 100000 | +----------+ 1 row in set (0.01 sec) (2)8002库模拟业务流量,并全量迁出...切换了binlog (3)全量迁移结束,8002库继续写入一段时间,8001库全量迁入 mysql -uroot -proot -P8001 -h127.0.0.1 server_234_db 数据库,只限本地log日志) 在mysql中查看binlog日志 mysql> show binlog events [IN 'log_name'] [FROM pos] [LIMIT...指定从哪个pos起始点开始查起(不指定就是从整个文件首个pos点开始算) LIMIT [offset,] 偏移量(不指定就是0) row_count 查询总条数(不指定就是所有行

    2.1K40

    大数据量查询容易OOM?试试MySQL流式查询

    一、前言 程序访问 MySQL 数据库时,当查询出来的数据量特别大时,数据库驱动把加载到的数据全部加载到内存里,就有可能会导致内存溢出(OOM)。...其实在 MySQL 数据库中提供了流式查询,允许把符合条件的数据分批一部分一部分地加载到内存中,可以有效避免OOM;本文主要介绍如何使用流式查询并对比普通查询进行性能测试。...() 可以实现流式查询,在执行 ResultSet.next() 方法时,会通过数据库连接一条一条的返回,这样也不会大量占用客户端的内存。...三、性能测试 创建了一张测试表 my_test 进行测试,总数据量为 27w 条,分别使用以下4个测试用例进行测试: 大数据量普通查询(27w条) 大数据量流式查询(27w条) 小数据量普通查询(10...查询耗时 10 条数据量用时 1 秒 ? 四、总结 MySQL 流式查询对于内存占用方面的优化还是比较明显的,但是对于查询速度的影响较小,主要用于解决大数据量查询时的内存占用多的场景。

    3K20

    【数据库】MySQL查询优化

    MySQL发送查询请求,到底做了什么工作? 下图是MySQL查询执行流程图: ? •客户端发送一条查询给服务器。•服务器先检查查询缓存,如果命中了缓存,则立刻返回查询在缓存中的结果。...2.关联子查询 MySQL的子查询实现是非常糟糕的。...认为无法先执行这个子查询,而是先对book 进行全表扫描,然后再根据book_id进行子查询。...获取需要访问的记录后,再更加关联列会原表查询所需要的所有列。以上并不一定符合你,具体还需explain对比择优使用。 小结: 总体来说都是围绕着尽量少全表扫描,尽量使用索引进行优化。...,所以每当写完SQL应该思考以下几点: •是否需要全表查询以及返回的数据是否合理。

    17.7K10

    MYSQL数据库-复合查询

    MYSQL数据库-复合查询 零、前言 一、基本查询 二、多表查询 三、自连接 四、子查询 1、单行子查询 2、多行子查询 3、多列子查询 3、在from子句中使用子查询 五、合并查询 1、union 2...、union all 零、前言 本章主要讲解学习MYSQL数据库中的复合查询,前面我们讲解的mysql表的查询都是对一张表进行查询,在实际开发中这远远不够 一、基本查询 示例: 查询工资高于500...worker,给自己的表起别名,因为要先做笛卡尔积,所以别名可以先识别 四、子查询 子查询是指嵌入在其他sql语句中的select语句,也叫嵌套查询 1、单行子查询 返回一行记录的子查询...,单行数据;多行子查询是指返回单列多行数据,都是针对单列而言的,而多列子查询则是指查询返回多个列数据的子查询语句 示例:查询和SMITH的部门和岗位完全相同的所有雇员,不含SMITH本人 3、在from...子句中使用子查询 子查询语句出现在from子句中。

    17.2K30

    Mysql数据库-子查询

    Mysql数据库-子查询 1. 什么是子查询 # 子查询定义 ## B语句作为A语句的一部分,B语句是select查询语句,那么B语句称之为子查询,内层查询(子集,subquery) -- 1....查询emp表的最高工资salary,然后再根据最高工资salary查询员工的信息 -- 2.1 通过max(salary)可以查询出emp表的最高工资为9000 mysql> select max(salary...查询部门平均工资超过全公司平均工资的部门id和部门平均工资 -- a. 先查询公司平均工资 -- b....查询部门平均工资超过全公司平均工资的部门id和部门平均工资 -- 3.1 先查询公司平均工资 mysql> select avg(salary) from emp; +-----------------...查询工资大于5000的员工,来自于哪些部门的名字 -- 1.1 首先查询salary>5000的部门ID,列子查询(多行单列) mysql> select dept_id from emp where

    50K10

    MySQL数据库——连接查询

    概述: 连接查询的作用将多张表进行内容上的连接,查看数据时可以同时看到多张表的多个数据 连接查询的分类 内连接查询 左连接查询 右连接查询 自连接查询 语法 #内连接 SELECT * FROM...inner join 实现多表查询,查询共有记录。...SELECT * FROM 表1 inner join 表2 on 表1.字段=表2.字段 左连接查询 left join 以左表为主,查询右表的数据。若右表不存在数据,则返回null。...SELECT * FROM 表1 left join 表2 on 表1.字段=表2.字段 右连接查询 right join 以右表为主,查询左表的数据。若左表不存在数据,则返回null。...SELECT * FROM 表1 right join 表2 on 表1.字段=表2.字段 自连接查询 inner join 左表和右表是同一个表,查询两个表中的数据。

    57.5K85

    MySQL数据库的查询

    SQL语句,子查询被嵌入到一对小括号里面 数据库设计之三范式 1、数据库设计之三范式的介绍 范式: 对设计数据库提出的一些规范,目前有迹可寻的共有8种范式,一般遵守3范式即可。...5、E - R模型的介绍 E-R模型即实体-关系模型,E-R模型就是描述数据库存储数据的结构模型。...E-R模型由 实体、属性、实体之间的关系构成,主要用来描述数据库中表结构。...开发流程是先画出E-R模型,然后根据三范式设计数据库中的表结构 外键SQL语句的编写 1、外键约束作用 外键约束:对外键字段的值进行更新和插入时会和引用表中字段的数据进行验证,数据如果不合法则更新和插入会失败...create database jing_dong charset=utf8; -- 使用 "京东" 数据库 use jing_dong; -- 创建一个商品goods数据表 create table

    23.4K30

    MySQL数据库复合查询

    前言:本文不对SQL查询做详细讲解,而做案例实践,适合已掌握MySQL基础语法,需要通过实际案例巩固技能的开发者。 首先准备这样三张表 雇员信息表、部门信息、薪水等级。...复合查询 查询工资高于500或岗位为MANAGER的雇员,同时还要满足他们的姓名首字母为大写的J select * from emp where (sal>500 or job='MANAGER') and...本质: 穷举组合(笛卡尔积) 两张表变成一张表,变成单表查询 无意义的部门信息: 所以,外键主键结合 注:MySQL中一切皆表。 显示部门号为10的部门名,员工名和工资。...'); 多行子查询 查询和10号部门的工作岗位相同的雇员的名字,岗位,工资,部门号,但是不包含10自己。...select ename,sal,deptno from emp where sal>any(select sal from emp where deptno=30); 多列子查询 查询和SMITH的部门和岗位完全相同的所有雇员

    41210
    领券