- 综合排序
- 最热优先
- 最新优先
- 来自专栏云数据库技术
数据库迁移总踩坑？用 NineData 迁移评估，提前识别所有兼容性风险
NineData 迁移评估，可在正式迁移前一键完成全量风险扫描，自动输出兼容度、改造方案与验证报告，让迁移从 “盲盒冒险” 变成 “可控工程”。 一、迁移评估到底能帮你做什么？ NineData 迁移评估是对源数据库与目标数据库之间的对象兼容性和 SQL 兼容性进行系统分析，帮你清晰回答两个关键问题：表、索引、视图、存储过程等对象，到新环境还能不能用？ 双重评估维度，全方位扫描风险创建评估任务时，可同时开启两项检查，实现无死角风险识别：数据库对象评估覆盖：表、视图、索引、约束、序列、存储过程、函数、包、触发器、同义词。 支持两种灵活的 SQL 获取方式：自动采集：从源数据库审计日志、慢查询日志中自动采集手动上传：支持上传本地 SQL/TXT/ZIP 文件，最大支持 5GB2. 迁移评估报告SQL回放报告： 三、总结：让数据库迁移真正可控数据库迁移，不该是一场充满未知的冒险。
14600编辑于 2026-03-03 - 来自专栏IT码农
Yii2之数据库迁移（Migrate）
在开发和维护一个数据库驱动的应用程序时，数据库的结构会随代码的改变而改变。 因为一个数据库结构发生改变的时候源代码也经常会需要做出改变，Yii 提供了一个 数据库迁移 功能，该功能可以记录数据库的变化， 以便使数据库和源代码一起受版本控制。 创建一个数据库迁移： yii migrate/create <name> 这是一个通用的创建数据迁移格式，其中<name>是必填的参数，用来描述当前迁移。 而mssql数据库中并没有text数据类型，但是有个类似的数据类型，叫做ntext。如果在数据库迁移到mysql的时候直接写实体字段类型text，那么如果改换数据库为mssql的时候就会很麻烦。 数据库中会出现一个叫做migration的表，用来记录迁移记录，如图： ? 选中的就是当前迁移操作生成的记录。 会生成一个数据表test_table并且插入一条数据。 ?
2K41发布于 2019-09-02 - 来自专栏全栈程序员必看
flask 数据库迁移_数据库迁移方案
在开发的过程中，需要修改数据库的模型，而且需要在修改之后更新数据库，最直接就是删除旧表，但是会丢失数据。所有最好的方式就是数据库迁移。 它可以追踪数据库模型的变化，然后把变动应用到数据库中。 在flask中可以使用Flask-Migrate扩展，来实现数据迁移。 会创建migrations文件夹，所有的迁移文件都放在里面。 python manage.py db init 创建自动迁移脚本： upgrade（）：函数把迁移中的改动应用到数据库中。 自动创建的迁移脚本会 根据模型定义和数据库当前状态的差异，生成upgrade（）和downgrade（）函数的内容。 对比不一定完全正确，有可能会遗漏一些细节，需要进行检查。 python manage.py db upgrade 更新完之后，在数据库会出现一个表 versions每迁移一次里面都会生成一个文件。
5.2K20编辑于 2022-11-10 - 来自专栏方丈的寺院
数据迁移(2) - 如何快速迁移
设计目标 设计一个数据迁移的方案，需要实现以下目标 迁移速度 qps 需要达到1k，这样能保证1亿的数据能够在1~2天内跑完 迁移qps可控 迁移有可能对线上服务有影响，需要可动态调整qps 数据完整， 因为有迁移速度的要求，我们将每个步骤进行分解，确保每个部分可以异步化，并发处理。这样可以提升速度。 遍历数据 完整遍历老的数据库。 不同的数据库有不同的方法，比如对于mysql,可以利用现成的binlog，其中就有全量的数据。 对于其他数据库，通常有两种方案 1. 可以可以将成功遍历完， 写入到任务队列的数据记录到某个存储，比如redis中，这样可以保证游标中断，或者服务重启后，可以从这个key中继续遍历，这样就实现了迁移的可中断 2. 场景三: 数据量比较大，公司无基础设施 遍历老数据库， 写入到消息队列中，然后监听消息，查询数据，写入到新库中。也很容易实现。
4.4K10发布于 2020-05-20 - 来自专栏全栈程序员必看
sqlserver数据库数据迁移_mysql 数据库迁移
前言： 在我们开发某些项目后，难免会遇到更换服务器，重新部署数据库的时候，那么问题来了？ 究竟怎么如何操作才能达到最佳效果； 起源： （1）：起初仅仅是为了测试用，所以迁移的时候不必把数据库中的数据全部迁移过去，仅仅需要数据库的架构即可； （2）：某些时候需要更换服务器，那么此时已经在内部存储了大量数据了 ，此时只能把架构+数据全部迁移过来； 解说： 以本地“Login”数据库为例，帮助大家理解四种迁移方式； 一：“分离”—>“附加” 说明： （1）或许会遇到分离数据库后，无法在其它服务器附加数据库的问题 （权限不够，自行更改属性） （2）推荐把数据库放到默认的数据库文件存放目录（E:\Microsoft SQL Server\实例根目录\MSSQL12.SQLEXPRESS\MSSQL\DATA）； （ ，防止误操作，类似于保存不同版本信息； ---- 四：生成“SQL脚本” 说明：兼容性最好，轻松避免数据库迁移的其它问题 ----
7.9K40编辑于 2022-11-03 - 来自专栏技术杂记
mysql 迁移2
Ss Sep25 2:17 /usr/sbin/keepalived -D root 73610 0.0 0.0 112500 2908 ? S Sep25 2:21 \_ /usr/sbin/keepalived -D root 73611 0.0 0.0 112484 2064 ? ]$ Note: 优先级相对原master要低，否则会抢ip 两个keepalived 上 advert_int 要设为 1 为了尽快完成切换 ---- 切换时间选择在业务低点 一般选择业务低点进行数据库操作
2.2K40编辑于 2022-03-22 - 来自专栏架构驿站
分布式数据库Couchbase 集群迁移-2
在之前的文章中，我们介绍了基于 CBBACK 以及 CBRESTORE 等操作方式进行的分布式数据库 Couchbase 集群迁移方案，具体可参考链接：分布式数据库Couchbase 集群迁移 其实，在基于不同的业务场景以及架构方案，针对分布式数据库 Couchbase 集群迁移有多种不同的实现策略，只有能够达到高效、稳定及安全，才是最优选择。 在进行主题之前先补充一下分布式数据库 Couchbase 一些基本概念：在 Couchbase 的集群架构中，没有中心节点和 Router 的概念，这些工作是由 Smartclient 完成的，在客户端与 基本思路： 1、备份老的 Couchbase 服务数据 2、将新 Couchbase 服务器加入到老服务器集群中，并通过 Rebalance 同步两台服务器 Cache 数据 3、修改客户端 Couchbase 配置节点 4、Failover 老服务器进行升级 本文主要基于 CBTRANSFER 操作方案以实现 Couchbase 集群迁移。
80440编辑于 2021-12-09 - 来自专栏技术杂记
mysql 迁移2
切换时间选择在业务低点 一般选择业务低点进行数据库操作，目的是为了降低业务风险，和数据丢失的风险 通过监控历史数据可以确定这个时间窗口 ---- 关闭原集群mha 由于集群软件在侦测到主服务器失效后会干预相关资源 [mysql@slave02 bin]$ masterha_check_status --conf=/etc/app1.cnf app1 is stopped(2:NOT_RUNNING). [mysql@slave02 bin]$ ps faux | grep manager mysql 27192 0.0 0.0 103244 864 pts/2 S+ 00:23 127.0.0.1/8 scope host lo inet6 ::1/128 scope host valid_lft forever preferred_lft forever 2: 127.0.0.1/8 scope host lo inet6 ::1/128 scope host valid_lft forever preferred_lft forever 2:
50820编辑于 2022-03-21 - 来自专栏Chasays
音频质量评估-2
音频质量评估-1：之前主要学习了音视频的编码和解码原理，和测试音频质量的方法。接下来继续学习下当前 短视频 领域的 视频质量测试方法。 Convert the images to grayscale grayA = cv2.cvtColor(imageA, cv2.COLOR_BGR2GRAY) grayB = cv2.cvtColor (imageB, cv2.COLOR_BGR2GRAY) # 5. 延时 网络因子 --- 带宽， 网络拥塞 除此之外呢，就是对视频画面也就是视频帧观感的评估， 业界有主观和客观的。 这种评估标准适合与线上无原始参考视频序列的无线和IP视频业务，或者输入和输出差异化的模型，比如说视频增强，视频合并等场景 测试框架 目前知晓的有2个，一个 QoSTestFramework，一个是Netflix
1.5K10编辑于 2021-12-06 - 来自专栏机器学习/数据可视化
模型评估方法-2
评估方法 在实际中，通常需要通过实现对学习器的泛化误差进行评估并进而做出选择。需要使用一个测试集来测试学习器对新样本的判别能力，然后以测试误差近似作为“泛化误差”。 在S上进行训练模型，在T上进行测试和评估误差，作为对泛化误差的估计。注意点： 训练/测试集合的划分应该尽量保持数据分布的一致性，避免因为数据划分过程而引入额外的偏差。 比如S中350个正例，350个反例；T中150个正例，150个反例 即使确定了划分比例之后，不同的划分方法仍然对模型的评估造成缺别。 交叉验证法 现将数据集合D划分成k个大小相似的互斥子集D_1,D_2,…,D_k。每个子集尽量保持数据分布的一致性，即从D中分层采样得到。 交叉验证法评估结果的稳定性和保真性在很大程度上是取决于k值，其最常用的是10，称之为10折交叉验证法。 交叉验证也需要随机使用不同的划分重复p次，最终的评估结果是p次k折验证的平均值。
74910发布于 2021-03-02 - 来自专栏家劲
MariaDB 数据库迁移
所以我决定把web服务器和数据库部署到一起。 二、迁移前导步骤 迁移过程中顺便记录一手，供后面再次迁移到别的服务器上查阅，省的麻烦。 服务器是CentOS 7.4 1.再次安装MariaDB yum -y install mariadb mariadb-server 2.启动MariaDB systemctl start mariadb create database novel 三、迁移数据库表和结构 先cd到mysql的运行路径下，再执行一下命令： 1.导出数据和表结构： mysqldump -u用户名 -p密码 数据库名 > 数据库名.sql mysqldump -uroot -p dbname > dbname .sql 敲回车后会提示输入密码 2.只导出表结构 mysqldump -u用户名 -p密码 -d 数据库名 （2）设置数据库编码 mysql>set names utf8; （3）导入数据（注意sql文件的路径） mysql>source /home/xxxx/dbname .sql; 方法二：
4.8K20发布于 2019-09-19 - 来自专栏快乐阿超
数据库迁移flyway
批评，这是正常的血液循环，没有它就不免有停滞和生病的现象——奥斯特洛夫斯基 数据库迁移可以使用flyway git地址：https://github.com/flyway/flyway 官网地址：
2.3K40编辑于 2022-10-31 - 来自专栏技术进阶
MongoDB数据库迁移
一、迁移整个库 1.mongodump（导出） 命令格式：mongodump -h host:port -d dbname -o D:datadump 2.mongorestore（导入） 命令格式： dbnameNew -u username -p pwd --authenticationDatabase admin --dir D:datadumpdbname mongorestore出现的问题： L2Calc.calcgsdataflash dbnameNew -u username -p pwd --authenticationDatabase admin --noIndexRestore --dir D:datadumpdbname 二、迁移单个
3.8K20编辑于 2022-12-05 - 来自专栏运维小路
Kafak-异构数据库迁移(MYSQL迁移PG)
中间件，我给它的定义就是为了实现某系业务功能依赖的软件，包括如下部分: Web服务器 代理服务器 ZooKeeper Kafka（本章节） 在我以前的工作中遇到过多次数据库迁移，如果数据库是一样的，其实相对都是比较简单的 因为基本上都可用利用数据库自身的同步原理就可以实现，但是现实中还有需求就是异构数据库的迁移。就好比Oracle到MYSQL，当然这里我为了简单，我这里用了简单的MYSQL迁移到PG。 消费者从Kafka里面消费数据，然后写入PG数据库。 环境准备 一个MYSQL数据库，里面有一个库，一个表，表里面有部分数据。 一个PG数据库，里面已经提前创建了和MYSQL同样的库表（无数据）。 import json import time import psycopg2 from kafka import KafkaConsumer from datetime import datetime value_deserializer=lambda v: json.loads(v.decode('utf-8')) ) self.pg_conn = psycopg2.
38700编辑于 2025-06-11 - 来自专栏惨绿少年
ESXI 迁移至KVM (V2V迁移)
-i ova centos-dev-test01-v2v.ova -o local -os /vmhost/dev/dev-test01 -of qcow2 [ 0.0] Opening the centos-dev-test01-v2v.xml <? 已开始 1.1.5 测试可用性 登陆迁移后的虚拟机测试 [root@clsn7 ~]# ssh root@192.168.19.123 The authenticity of host '192.168.19.123 [root@clsn7 ~]# virsh autostart centos-dev-test01-v2v 域 centos-dev-test01-v2v标记为自动开始 至此一台机器的迁移完成， 后续按照相同的方式将其他的虚拟机进行迁移即可。
1.5K20发布于 2018-07-31 - 来自专栏惨绿少年
ESXI 迁移至KVM (V2V迁移)
-i ova centos-dev-test01-v2v.ova -o local -os /vmhost/dev/dev-test01 -of qcow2 [ 0.0] Opening the centos-dev-test01-v2v.xml <? 已开始 1.1.5 测试可用性 登陆迁移后的虚拟机测试 [root@clsn7 ~]# ssh root@192.168.19.123 The authenticity of host '192.168.19.123 [root@clsn7 ~]# virsh autostart centos-dev-test01-v2v 域 centos-dev-test01-v2v标记为自动开始 至此一台机器的迁移完成， 后续按照相同的方式将其他的虚拟机进行迁移即可。
1.4K30发布于 2018-04-19 - 来自专栏Linux运维
数据库迁移：在不同环境或版本间迁移数据库
本文将系统讲解数据库迁移的核心概念、常见场景、迁移策略、风险控制与最佳实践，帮助你在不同环境或版本之间安全、稳定地完成数据库迁移。一、什么是数据库迁移？ 三、数据库迁移的核心流程（通用模板）下面是一套可复用的迁移流程框架，适用于大多数数据库类型：1.评估与规划数据量评估（GB/TB）表结构复杂度业务高峰与低峰时段兼容性检查（SQL、函数、索引、字符集）迁移窗口 （是否允许停机）2.选择迁移方式常见迁移方式如下：迁移方式是否停机适用场景特点全量备份+恢复需要小规模数据、低峰迁移简单但耗时全量+增量同步可不停机大规模数据、生产迁移常用于MySQL、MongoDB主从切换 不能跳版本）六、最佳实践清单（可直接用于项目）迁移前评估数据量与迁移窗口兼容性检查准备回滚方案预演迁移流程迁移中全量迁移增量同步数据校验切换业务迁移后功能验证性能验证监控与优化清理旧环境七、总结数据库迁移是一项高风险但又不可避免的工作 无论是环境迁移、版本升级还是架构调整，只要遵循“评估→规划→执行→验证→回滚”的流程，并结合合适的迁移工具与策略，就能大幅降低风险，确保业务平稳运行。
31210编辑于 2026-01-19 - 来自专栏会呼吸的Coder
数据库反向迁移命令
在实际项目开发中，一般不会创建模型，然后迁移到数据库，因为同一个数据库，可能对应着多个项目，所以此时我们需要懂得如何反向迁移。 Django django的orm模型已经内置了反向迁移命令 python manage.py inspectdb > models.py # >后面是生成的文件路径和名称 flask flask并没有配置相关的反向迁移模块 我在网上试了多个具体相关功能的迁移包，最后我个人感觉sqlacodegen相对来说还是比较好用的，可通过下方命令安装 pip install sqlacodegen 在命令行执行 sqlacodegen mysql://用户名:密码@ip:端口号/数据库 >models.py 大体跟django的类似，但是多了数据库连接 使用这个包，额外要注意一点，他会报一个错误（ mysqldb查找不到的错误）。
2.8K40发布于 2020-02-17 - 来自专栏云技术+云运维
数据库的迁移救援
一日风雨交加，晚上值班时，一业务的数据库空间不够， 报警 。 正常停库 SQL> shutdown immediate Database closed. Database dismounted. -03113: end-of-file on communication channel Process ID: 381 Session ID: 191 Serial number: 3 可能由于昨晚数据库强制关闭 ，导致文件状态可能不一致，因为正常关闭数据库会同步校验各文件，使得重新启动的时候文件时间点一致。 Partitioning, OLAP, Data Mining and Real Application Testing options SQL> select status from v$instance 2 2 52428800 1 CURRENT 3 0 52428800 1 UNUSED 4
1.9K40发布于 2019-10-29 - 来自专栏开发+运维+架构
PostgreSQL数据库迁移案例
---Mysql系统库是MyISAM的，相较而言，PG数据库在这方面要好一些。 是pgsql的模板数据库。 所谓模板数据库就是创建新database时，PostgreSQL会基于模板数据库制作一份副本，其中会包含所有的数据库设置和数据文件。 怎么创建模板数据库？ alter database tmpdb is_template false; drop database tmpdb; 数据迁移案例 数据备份 pg_dump -h 192.168.30.1 -p
4.7K30编辑于 2022-01-10
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号