首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏数据库相关

    pgloader的使用

    具体可以看官方文档 https://pgloader.readthedocs.io/en/latest/intro.html 注意: pgloader它只能整库同步, 如果要同步MySQL里面某些表到PG 安装 pgloader 使用rpm包安装的话,很简单。它在pgdg-common 这个repo源里面。 yum install pgloader 即可完成安装。 $ pgloader pgloader [ option ... ] command-file ... pgloader [ option ... ] SOURCE TARGET --help -h 更详细的介绍,见官方文档:https://pgloader.readthedocs.io/en/latest/ref/mysql.html 2.2 执行数据同步 $ pgloader . /github.com/dimitri/pgloader/ https://pgloader.readthedocs.io/en/latest/

    2.6K00编辑于 2023-12-26
  • 来自专栏IT技术订阅

    使用pgloader将MySQL迁移到PostgreSQL

    - 根据配置,pgloader 连接到源数据库并获取相应的表结构和数据。 - 然后,pgloader 将源数据按照 PostgreSQL 的要求进行适当转换和清洗。 使用pgloader将MySQL迁移到PostgreSQL(简称pgsql)的详细步骤如下: 步骤一:安装pgloader 对于Linux系统(如Ubuntu): sudo apt-get update 通过Docker安装: docker pull dimitri/pgloader docker run --rm --name pgloader -v /path/to/your/config:/pgloader dimitri/pgloader <command> 步骤二:准备pgloader配置文件 pgloader支持命令行参数直接迁移,但对于复杂迁移任务,推荐创建一个`.load`配置文件,例如`mysql_to_pgsql.load path/to/mysql_to_pgsql.load:/pgloader/loadfile.load dimitri/pgloader loadfile.load 步骤四:监控与调试 迁移过程中,pgloader

    7.6K10编辑于 2024-05-20
  • 来自专栏超级架构师

    「数据架构」数据迁移神器 pgloader,迁移各种数据到PostgreSQL

    介绍 pgloader从各种来源加载数据到PostgreSQL。它可以转换动态读取的数据,并在加载前后提交原始SQL。 pgloader知道如何从不同的来源读取数据: 文件CSVFixed FormatDBF 数据库SQLiteMySQLMS SQL ServerPostgreSQLRedshift pgloader知道如何使用 对于CSV和固定格式文件,必须向pgloader提供预期输入属性的完整描述。对于数据库,pgloader连接到live服务,并知道如何直接从它获取所需的元数据。 命令行 pgloader命令行接受这两个变种: pgloader [<options>] [<command-file>]...pgloader [<options>] SOURCE TARGET 您可以使用 原文:https://pgloader.readthedocs.io/en/latest/intro.html 本文:https://pub.intelligentx.net/pgloader-loads-data-various-sources-postgresql

    3.4K10发布于 2020-01-14
  • 来自专栏Lansonli技术博客

    PostgreSQL基础(十四):PostgreSQL的数据迁移

    这种迁移的插件很多,这里只说一个,pgloader(非常方便)以MySQL数据迁移到PostgreSQL为例,分为几个操作:1、准备MySQL服务(防火墙问题,远程连接问题,权限问题),准备了一个sms_platform 可以安装在任何位置,比如安装在MySQL所在服务,或者PostgreSQL所在服务,再或者一个独立的服务都可以我就在PostgreSQL所在服务安装# 用root用户下载yum -y install pgloader4 、 准备pgloader需要的脚本文件官方文档: Welcome to pgloader’s documentation! — pgloader 3.6.9 documentation记住,PostgreSQL的数据库需要提前构建好才可以。 5、执行脚本,完成数据迁移 先确认pgloader命令可以使用执行脚本: pgloader 刚刚写好的脚本文件​

    1.3K10编辑于 2024-10-03
  • 来自专栏Zabbix中国官方

    如何用pgloader将Zabbix的MySQL数据库迁移到PostgreSQL数据库?

    工具 下载pgloader安装包 # wget https://codeload.github.com/dimitri/pgloader/tar.gz/refs/tags/v3.6.9 # tar -zxvf v3.6.9 部署pgloader工具 # dnf -y install freetds-devel ##安装依赖包 # cd pgloader-3.6.9/ # chmod 755 /bootstrap-centos.sh # make pgloader # cp build/bin/pgloader /usr/local/bin/ # pgloader --version pgloader create no indexes, #当列出此选项时,pgloader将跳过创建索引。 no foreign keys, #当列出此选项时,pgloader将跳过创建外键。 data.pgloader ##只有一台zabbixserver的监控数据,数据很少,用时很少 2022-12-08T17:08:58.009000+08:00 LOG pgloader version

    4.5K20编辑于 2023-03-02
  • 来自专栏soon

    sqlite迁移到postgres

    第一步,下载迁移工具 经过我的实际的测试,使用pgloader的成功率会比较高 编译安装时间可能比较长,推荐使用包管理工具 brew进行安装 brew install pgloader # 加上 --HEAD reset sequences, data only set work_mem to '16MB', maintenance_work_mem to '512 MB'; 具体参数说明可以查阅pgloader 文档 由于sqlite布尔值实际存储为0、1整形,这样会和其他整形混淆,建议先手动创建数据库表,规定好数据类型,然后配置include no drop选项 3.执行脚本 pgloader load.test

    2.3K20发布于 2019-02-14
  • 来自专栏Lansonli技术博客

    PostgreSQL基础(一):PostgreSQL入门介绍

    PGSQL因为开源,有很多做数据迁移的工具,可以让你快速的从MySQL,SQLServer,Oracle直接平转到PGSQL中内部,比如pgloader这样的数据迁移工具。

    1.5K21编辑于 2024-09-03
  • 来自专栏Albert陈凯

    2019-03-28 mac 用brew安装nginx

    aubio duply homeassistant-cli libzip pgloader

    1.7K30发布于 2019-04-01
  • 来自专栏数据分析

    [PostgreSQL]从MySQL迁移PostgreSQL:算法团队踩过的7个坑

    0.1234567890123456, 0.9876543210987654], "score": 12345678901234567890}');迁移后PostgreSQL查询结果:-- PostgreSQL 15.3(使用pgloader feature_json JSON, -- 保留文本形式,避免主动解析 feature_jsonb JSONB -- 用于查询加速的冗余字段);-- 方案B:迁移脚本中主动转换类型-- 使用自定义迁移脚本而非pgloader PostgreSQL迁移后:-- 使用pgloader默认迁移CREATE TABLE model_predictions ( id BIGSERIAL PRIMARY KEY, -- 实际创建 ;关键差异:Sequence是独立对象:不自动跟踪表中最大ID值手动插入不更新Sequence:INSERT INTO t (id) VALUES (1000)不会将sequence设为1000pgloader

    49310编辑于 2025-12-11
  • 来自专栏AI学习笔记

    [PostgreSQL]MySQL vs PostgreSQL:算法工程师为何转投PostgreSQL阵营

    MySQL schema转换(使用pgloader)cat > mysql_to_pg.load <<EOFLOAD DATABASE FROM mysql://root:${MYSQL_PASS ml_platform SET search_path TO migration, public; $$ AFTER LOAD DO $$ ANALYZE VERBOSE; $$;EOF# 执行迁移pgloader

    40310编辑于 2025-11-28
  • 来自专栏Greenplum

    Oracle 与 PostgreSQL:主要区别和最佳用例

    PostgreSQL 提供了 pg_dump 和 pgloader 等实用程序,以促进从其他数据库进行数据迁移。 Oracle 和 PostgreSQL 在性能、功能和兼容性方面具有可比性。

    88210编辑于 2025-09-11
领券