首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏技术杂记

    mysql 迁移10

    监测进展 [root@slave02 data]# watch -n 2 du -sh /data/mysql/ 每两秒看一下数据目录大小 ---- 恢复完成 151209 03:57:34 [01] Copying ./mysqltestt_db/kqmobile_payments.ibd to /var/lib/mysql/mysqltestt_db/kqmobile_payments.ibd 151209 03:57:34 [01] ...done 151209 03:57:34 [01

    2.5K20编辑于 2022-03-22
  • 来自专栏技术杂记

    mysql 迁移10

    修改权限 [root@slave02 mysql]# cat xtrabackup_binlog_pos_innodb mysql-bin.000004 8299670 [root@slave02 mysql]# ll total 5916780 drwx------ 2 root root 4096 Dec 9 02:49 livedb drwx------ 2 root root 4096 Dec 9 02:57 mysqltest_his drwx------ 2 ro

    42130编辑于 2022-03-22
  • 来自专栏phodal

    AI × 老旧系统:Vibe Coding 构建 AI 迁移工具,实现 10x 端到端智能迁移

    即 AI 生成 AI 迁移工具,以大大加速现有应用的迁移,并尽可能少破坏现有的业务逻辑。 如此,我们便可以打造出基于 workflow + Agent 的自动化迁移工具。 AI × Legacy Modernization:从增强语义理解到 10x 速度的重建 基于过往丰富的遗留系统迁移经典,我们会加 AI 加速放在两个主要的领域: 加速对于遗留系统的分析与评估,如:AI 与现有的 AI 编程是相似的,我们可以借用大量的 AI 工具来帮助设计迁移。 ,再配合 AI 生成测试用的代码,我们就可以在工具中校验迁移规则的正确性,再进行迁移。 Vibe 自动化遗留系统迁移的 AI Agent 工具 在我们有了更加丰富的经验和足够储备之后,剩下的问题就非常简单了:将这些经验和工具结合起来,构建出一个自动化的迁移工具

    1.2K10编辑于 2025-08-08
  • 来自专栏大数据与微服务架构

    数据迁移工具Sqoop

    Sqoop 是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,它是Hadoop环境下连接关系数据库与Hadoop存储系统的桥梁,支持多种关系型数据源和Hive、HDFS、Hbase的相互导入

    3K20发布于 2020-04-11
  • 来自专栏idba

    Redis 数据迁移工具

    一 简介 Redis Input/Output Tools (RIOT) 工具是一款支持 Redis 和文件,数据库之间进行数据同步的工具,支持全量和增量同步。 RIOT 工具的增量功能是基于 Redis 的键空间消息提醒(keyspace notification)功能,通过监听 源数据库的键值数据变化事件并解析该事件为对应的命令动作,在目标端执行该命令,以便达到增量迁移 /riot --help 2.3 迁移命令 RIOT 工具支持 Redis 到 Redis ,文件和 Redis, 数据库和 Redis 之间进行数据同步迁移,本文只基于 Redis 之间的数据迁移功能 DECRBY number 10 LPUSH k1 v1 k2 v2 k3 v3 HMSET uid:1 name Tom age 15 HMSET uid:2 name Jerry age 13 RIOT 工具支持作为从库实时同步数据,迁移速度还是非常快的,现有的测试环境中迁移速度可达 3w/s ,具体涉及到客户的环境,需要注意出口带宽,避免带宽比较小,导致迁移延迟。

    1.9K21编辑于 2023-09-04
  • 来自专栏有刻

    dotnetcore 自动迁移工具

    费心思做了一个简单的 dotnetcore 迁移工具,欢迎大家使用和交流 工具所做的工作: 查找所有输入目录的子目录和上级目录,获取包含 *.sln 的项目集合,可批量迁移。 说明:工具让项目迁移之后能够正确地以 dotnetcore 类型加载,并且保证项目之间的引用不变更,工具并不更改项目逻辑代码。

    1.4K80发布于 2018-05-14
  • 来自专栏蓝天

    Redis的slot迁移工具

    工具下载: https://github.com/eyjian/redis-tools/blob/master/move_redis_slot.sh 支持迁移已有的keys。 #! /bin/sh # Writed by yijian on 2020/8/10 # 迁移 slot 工具,但一次只能迁移一个 slot # # 使用时,需要指定如下几个参数: # 1)参数1:必选参数, 用于指定被迁移的 slot # 2)参数2:必选参数,用于指定源节点(格式为:ip:port) # 3)参数3:必选参数,用于指定目标节点(格式为:ip:port) # 6)参数4:可选参数,用于指定访问 10.9.12.9:1386 # # 执行本脚本时,有两个“确认”, # 第一个“确认”是提示参数是否正确, # 第二个“确认”是提示是否迁移已有的keys, # 如果输入非yes则只迁移slot,不迁移已有 = "XOK"; then echo "[source://$SRC_NODE_IP:$SRC_NODE_PORT] $err" exit 1 fi # 是否迁移已有的keys?

    1.7K30发布于 2020-08-13
  • 来自专栏Reinvent Data Science

    Milvus 数据迁移工具 -- Milvusdm

    Milvusdm (Milvus Data Migration) 是一款针对 Milvus 研发的数据迁移工具,支持 Milvus 数据传输以及数据文件的导入与导出: Faiss to Milvus: 功能介绍 在之前发布的文章 Milvus 迁移升级攻略中,我们介绍了如何将 Milvus 数据从有网环境迁移到无网环境以及不同版本 Milvus 之间的数据迁移。 数据迁移工具 milvusdm 可以通过指定 Milvus 中的集合或分区,帮助用户更智能地迁移所需数据。 本文将介绍 milvusdm 工具的使用方法: Faiss to Milvus ?使用示例 1. 你可以通过代码文件结构了解 milvusdm 工具的设计构思。如有新的数据迁移需求,你还可以通过修改源码,为社区贡献代码。 ?

    4.4K20发布于 2021-03-22
  • 来自专栏宜信技术实践

    Redis migrate 数据迁移工具

    在工作中可能会遇到单点Redis向Redis集群迁移数据的问题,但又不能老麻烦运维来做。为了方便研发自己迁移数据,我这里写了一个简单的Redis迁移工具,希望对有需要的人有用。 本工具支持: 单点Redis到单点Redis迁移 单点Redis到Redis集群迁移 Redis集群到Redis集群迁移 Redis集群到单点Redis迁移工具已经编译成了多平台命令,直接从Github /redis-tool-linux-amd64 -h 可以查看该工具所支持的所有功能: $ .  set, sorted-set, list] Available Commands: all         迁移所有 hash       哈希列表迁移 list       列表迁移  set          尾巴 使用golang写的一个比较简单的工具, 主要用于在Redis没有持久化或多套Redis向一套Redis迁移的情况下使用。 希望对大家有用,谢谢! 作者:宜信技术学院 王聪

    1.9K20发布于 2020-11-03
  • 来自专栏技巧笔记

    EPIC游戏迁移备份工具

    如你所见,EPIC并没有像steam那样的迁移功能,这个工具帮了大忙。 简单小工具,现在我用的是0.7版本。 图片 图片 注意:此工具开发作者在Github开源 | 尊重作者原创 Github地址:https://github.com/BeliefDawn/Epic-Games-Backup/releases

    1.5K10编辑于 2022-11-28
  • 来自专栏云计算D1net

    10步搞定系统的云迁移

    首先我想要说,未来大多数企业都会从具体的机房迁移出来。虽然你企业中并不是所有负载系统都适合云计算,但是大多数公司可以而且应该采用云计算。 然而,什么是云计算呢? 平台即服务 (PaaS): PaaS是一系列中间件、软件开发部署工具与IaaS的组合体,允许公司在云上快速地进行服务开发和部署。 虽然这篇博客文章的主题是有关云计算迁移的,但我更想说的是云计算不仅是一次运动,更是一次变革。 云迁移从哪开始呢? 业务影响。我不会从业务的最关键的应用系统开始。如果你来自于零售业,不要从电子商务开始。在迁移那些重要负载系统之前需要获取更多的经验。 在进行云迁移之前这几个问题是需要考虑的。不过别担心,供应商会越来越好地满足你的需求。一个功能支持限制可能在几个月内就被解决,并且有所改变。

    88660发布于 2018-03-26
  • 来自专栏iTesting

    Cypress10.x版本迁移指南

    我将讲解如何迁移到Cypress最新Release的10.x版本(买了书的同学们,公众号回复你的微信号,拉你到Cypress中国群)。 最近两年测试界最火的测试工具莫过于Cypress,作为测试工程师弯道超车必备、下一代UI自动化测试利器,Cypress开发团队也一直在拼命做事,这不,Cypress10.x重磅发布了。 Cypress给大家准备了一个迁移工具。 老版本Cypress迁移到Cypress10.x步骤如下: 1.安装最新版本。 这个有点鸡肋的,当你发现Migrate工具不给力后,不要慌,看看上个部分Cypress的主要改动,然后一点点改就行,或者直接选择一个测试用例执行,它会报错,你一个个把报错的错误解决掉就完成迁移啦。 如果迁移还有问题,可以直接Cypress中国群里问,或者官网看看细节。 最后寄语 Cypress10.x下决心做这么大改动,社区的反馈声音也很大,但基本是好的。

    2.4K20编辑于 2022-09-01
  • 来自专栏第三方工具

    10亿数据,如何做迁移

    10亿数据,如何做迁移? 一、分而治之 若把数据迁移比作吃蛋糕,没人能一口吞下整个十层蛋糕; 必须切成小块细嚼慢咽。 二、双写 经典方案是停机迁移,但对10亿数据来说停机成本难以承受,双写方案才是王道。 三、用好工具 工具名称 适用场景 10亿数据速度参考 mysqldump 小型表全量导出 不建议(可能天级) MySQL Shell InnoDB并行导出 约2-4小时 DataX 多源异构迁移 (物理备份+ Binlog点位) 流量回切:准备路由配置秒级切换旧库 数据标记:新库数据打标,便于清理脏数据 处理10亿数据的核心: 分而治之:拆解问题比解决问题更重要 逐步递进:通过灰度验证逐步放大流量 守牢底线:回滚方案必须真实演练过 没有百分百成功的迁移,只有百分百准备的Plan B!

    25300编辑于 2025-05-29
  • 来自专栏有趣的django

    4.alembic数据迁移工具

    alembic是用来做ORM模型与数据库的迁移与映射。 alembic使用方式跟git有点类似,表现在两个方面,第一个,alemibi的所有命令都是以alembic开头; 第二,alembic的迁移文件也是通过版本进行控制的。 alembic revision --autogenerate -m "第一次提交" (6)将生成的迁移脚本映射到数据库中 alembic upgrade head 以后如果想要添加或修改模型,重复 -m:本次迁移做了哪些修改 upgrade:将指定版本的迁移文件映射到数据库中,会执行版本文件中的upgrade函数 head:代表当前的迁移脚本的版本号 downgrade:会执行指定版本的迁移文件中的    解决办法:删除数据的alembic_version表中的数据,重新执行alembic upgrade head 1.3.current命令使用介绍 用alembic工具:数据库中会自动生成一张表

    2.1K30发布于 2019-02-13
  • 来自专栏foochane

    Sqoop数据迁移工具的使用

    文章作者:foochane 原文链接:https://foochane.cn/article/2019063001.html Sqoop数据迁移工具的使用 sqoop简单介绍 sqoop数据到HDFS /HIVE sqoop数据到MySQL 1 sqoop简单介绍 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。 sqoop只是一个工具,安装在那个节点都可以,只要有java环境和hadoop环境,并且能连接到对应数据库即可。 DEFAULT NULL, `deg` varchar(100) DEFAULT NULL, `salary` int(11) DEFAULT NULL, `dept` varchar(10 INT NOT NULL PRIMARY KEY, name VARCHAR(20), deg VARCHAR(20), salary INT, dept VARCHAR(10

    3.9K30发布于 2019-07-01
  • 来自专栏编程软文

    Flyway数据迁移工具使用和安装

    Flyway数据迁移工具主要是用来控制数据库增删改的版本控制,类似于git,可是相比git代码管理,他的版本控制是通过数据库当中的flyway_schema_history来控制的,这样每次部署生产环境的时候就不需要人工再去执行

    2.2K20发布于 2020-03-24
  • 来自专栏张善友的专栏

    .net 应用迁移到Mono 工具 (Moma)

    Mono Migration Analyzer (Moma) 是一个用于开发者使用的MS .net下开发的应用程序迁移到Mono平台的不兼容性检测工具工具通过分析.dll或者.exe程序集的代码是否符合ECMA CLI,大家都知道符合ECMA CLI标准的.net 程序可以运行于MS .net和Mono平台。 这个工具使用Cecil,这是一个用于检测代码是否符合ECMA CLI标准的类库,Mono网站上的小工具还真多。 到http://www.mono-project.com/MoMA下载最新版本,解压后运行MoMA.exe,选择一个要分析的程序集,可以选择一组程序集一起分析,在程序集分析过程中,这个工具会分析程序集中的所有方法 看来迁移到Mono不是一件容易的事情。分析结果附后,有兴趣的你可以自己分析自己的程序集看看。

    2.1K80发布于 2018-01-31
  • 来自专栏苏三说技术

    给你10亿数据,如何做迁移

    这让我深刻领悟到——10亿条数据不能用蛮力搬运,得用巧劲儿递接! 今天这篇文章,跟大家一起聊聊10亿条数据,如何做迁移,希望对你会有所帮助。 ,但对10亿数据来说停机成本难以承受,双写方案才是王道。 ("数据主键最大不一致,旧库{} vs 新库{}", maxOldId, maxNewId); repairService.fixData(); } } 三、用好工具 不同场景需匹配不同的工具链,好比搬家时家具用货车,细软用包裹。 工具选型对照表 工具名称 适用场景 10亿数据速度参考 mysqldump 小型表全量导出 不建议(可能天级) MySQL Shell InnoDB并行导出 约2-4小时 DataX 多源异构迁移 依赖资源配置

    39510编辑于 2025-02-21
  • 来自专栏Python数据分析实例

    跨库数据备份还原、迁移工具

    为了快速完成数据备份操作,于是我写了个同步迁移的代码。同样的使用需求下,只需修改配置settings就可以直接用。 当然也可以用数据库客户端界面可视化完成数据库的备份还原。 SHOW FULL COLUMNS FROM system_info 代码结构 主函数db_backup.py完成数据库表同库、垮库的备份、同步、迁移功能,logging_conf.py日志记录模块 代码部分 数据库备份、迁移-db_backup.py 该模块主要方法:copy_to_from_mysql和mysql_sync_to_sqlserver。 BASE_DIR, 'data') if not os.path.exists(local_data): os.makedirs(local_data, exist_ok=True) 数据库连接和路径获取工具

    1.4K30编辑于 2022-04-08
  • 来自专栏YashanDB知识库

    基于YMP工具实现Oracle迁移YashanDB

    包括全量校验和统计校验功能,满足迁移后数据一致性的强力支持。## 1.3 YMP工具规格# 2. 环境说明# 3. YMP工具部署 ## 3.1 安装前准备### 3.1.1 下载安装包YashanDB数据库软件和YMP迁移工具都可以在这个地址下载:https://download.yashandb.com/download 例:migration.parallel.execute:10,migration.parallel.index: 5,表示,同时10个连接在并行建索引,每个索引的并行度是5(CREATE INDEX 迁移体验- **YMP工具部署简单,迁移过程也很简洁清晰,可以快速上手,方便快捷**;- **YashanDB与Oracle的数据类型高度兼容,可以实现平滑迁移**; - **YMP工具提供整个迁移步骤的详细报告 ,有助于回溯整个迁移过程**; - **YMP工具目前仅支持离线迁移,不支持在线和增量迁移**; - **YMP工具针对部分数据库暂未支持的功能和特性需要手动处理**。

    75910编辑于 2025-02-20
领券