首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >保持protobuf规范与关系数据库(例如PostgreSQL)同步的最佳实践

问保持protobuf规范与关系数据库(例如PostgreSQL)同步的最佳实践
EN

Database Administration用户
提问于 2020-01-17 13:26:18
回答 1查看 4.3K关注 0票数 16

1.我们有一个使用谷歌协议缓冲区格式的模式定义,用于为不同的gRPC实现生成代码(Python )

2.我们有一个数据库(PostreSQL),它是从映射协议缓冲区结构的SQL文件中初始化的。

问题: protobuf规范经常发生变化。这必须反映在数据库中,这是一项繁琐的任务,手动执行时容易出错。

最近,当我们更新协议缓冲区规范时,我们转移到Alembic,用于迁移到(活动)数据库结构的连续更新。但是,我们仍然觉得需要维护两个基本相等或至少非常相似的结构: ProtoBuf和SQL(通过管理或在普通的*.sql文件中管理)。

我已经搜索了一遍又一遍,关于其他人如何解决这个问题的信息很少。理想情况下,我们希望设置一个CI/CD进程,它将原型规范(例如,从teaspoon更改为knife的消息名称)转换为Schema定义(例如CREATE TABLE teaspoon (...);),或者从它创建specification (例如,ALTER TABLE teaspoon RENAME TO knife;)。

我知道在现实中它比简单的例子更复杂,但我甚至找不到支持半自动和人工监督转换的代码。有什么建议吗?

到目前为止,我发现的是:

  • 从SQL文件中,我们可以创建一个PostgreSQL数据库(例如在Docker中),并使用[医]二乳精自动创建SQLAlchemy模型
  • 在SQLAlchemy模型中,我们可以使用创建(半)自动架构迁移代码
  • 我们回到了零点:我们需要维护基本的SQL文件和protobuf规范
  • 有墨卡托,但据我所知,它只能从SQL映射到gRPC,反之亦然。
  • 还有迁延,它看起来很适合为不同的PostgreSQL模式生成自动差异(下面是一个介绍性和文档)

也许会有类似于“”的东西,可以为每个protobuf规范更改定义SQL迁移吗?

EN

回答 1

Database Administration用户

发布于 2022-07-08 18:44:01

解决这一问题可能会有另一种办法。Rails (RoR)人员通过创建迁移和定义差异来解决这个问题,以确保能够正确地迁移schema,而不会导致数据损坏问题。我怀疑DB模式比相应的proto缓冲区具有更多的约束。

也许扩展RoR迁移机制以生成适当的proto缓冲区将是一个更干净的自动化过程。

票数 1
EN
页面原文内容由Database Administration提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://dba.stackexchange.com/questions/257654

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档