- 综合排序
- 最热优先
- 最新优先
- 来自专栏云服务与SRE架构师社区
国产分布式数据库架构初印象
本文主要分析一下on premise 数据库，特别是分布式数据库。 现在的分布式数据库基本上都借鉴Google的spanner/F1论文,采用paxos/raft协议来保证数据的强一致性，所以从架构上来都类似，可以明显区分出计算节点和存储节点。 但Oracle Exadata脱胎于集中式的共享存储，令人惊讶的是，它的架构与这些分布式数据库不谋而合。 TIDB TiDB是近几年很火的分布式数据库，它的架构最近似Oracle，下图和主要组件的解释来自官网。 ? 而基于paxos/raft协议的分布式数据库是可以的，甚至是两地三活，n地n活。
4.3K34发布于 2020-01-15 - 来自专栏胡彬的专栏
腾讯云分布式数据库 DCDB 架构解密
腾讯云分布式数据库是一个适用于OLTP场景且与MySQL 5.5 、5.6兼容的分布式关系型数据库。 下面主要介绍TDSQL的核心架构和应用场景。 在后续两年时间，陆续支撑米大师（Midas）、微众银行（WeBank）等多个兄弟业务的上线，并针对银行场景的数据关系模型设计了关系紧密的数据聚合，同时将跨节点的分布式架构转换扩展到单机架构，有效的覆盖了大中小多层次的用户 2017年，腾讯云CDB for TDSQL更名为CDB for MariaDB，同时正式推出分布式数据库DCDB 架构： 系统由三个模块组成：Scheduler、Agent、网关，三个模块的信息交换都是通过 灵活的主备配置： 通常为了保证可用性，TDSQL最少要求一主二从分布在3个IDC的部署方式，保证任意一个IDC挂掉都不影响系统的可用性和数据一致性。2个IDC同时挂掉，系统还可以提供只读服务。
4.5K10发布于 2017-06-23 - 来自专栏开发内功修炼
聊聊分布式数据库TDSQL的技术架构
那么什么是分布式数据库，其分布式、强一致性、高可用以及无损升级等特性又是如何实现的呢。今天我们在这篇文中使用 TDSQL 技术架构来进行学习和理解。 传统的 Oracle 和 DB2 都属于传统的单体数据库架构。由于数据的进一步的大规模的增长，这种传统架构出现了不少的弊端。一个弊端就是扩展性问题。 这是分布式数据库的首要目标，对用户屏蔽分布式，只在逻辑上提供整张的表访问，简化用户使用数据库的方式。 由于 SQL 引擎只负责计算，不负责存储，本身是无状态的。 SET 是分布式数据库实例。一个 SET 内部包含了 Master、Slave 节点。每个 SET 中存储哪些数据是由 shardkey 来进行分散的。 这种架构有点类似于微服务中 Mesh 架构 中用 Sidecar 把微服务框架功能独立出来一样。
3.2K10编辑于 2023-12-11 - 来自专栏后端从入门到精通
分布式数据库-架构真题（二十六）
3、（2018年）J2EE应用系统支持五种不同类型的构件模型，包括（）。 A、架构设计 B、问题分析与建模 C、属性模型构造和分析 D、质量建模 答案：C 解析： 体系结构权衡分析法：场景和需求搜集、体系结构视图和场景实现、属性模型构造和分析中。 A、问题说明 B、问题建模 C、体系结构描述 D、需求建模 答案：C 解析： 场景架构分析方法主要输入是 问题描述、需求声明和体系结构描述。 还增加了几个模式级别，其中（）定义分布式数据库中数据的整体逻辑结构，使得数据使用方便，如同没有分布式。 A、分片模式 B、全局外观模式 C、分布模式 D、全局概念模式 答案：D 解析： 分布式数据库在各结点独立，在全局统一。
62210编辑于 2023-09-18 - 来自专栏数据库架构之美
金融级分布式数据库架构设计要点
由于其分布式能力实现在不同的层次（应用层、中间层、数据库层），对应用程序有不同的侵入程度，其中分布式访问客户端对应用侵入性最大，改造难度最大，而分布式数据库方案对应用侵入性最小，但是架构设计及研发难度最大 分布式数据库总体架构 其实当前市面上的分布式数据库总体架构都是类似的，由必不可缺的三个组件组成：接入节点、数据节点、全局事务管理器。 这个架构或多或少都受到了google spanner F1论文的影响，这篇文章主要分析了这几个组件在实现上有什么难点，该如何进行架构设计。 ? 在线扩容是分布式数据库的一项巨大优点，而扩容数据节点必然涉及到数据向新节点的迁移，目前市面上的分布式数据库基本上都做到了自动的数据重分布。 No.3 GTM性能的问题？ GTM是大部分分布式数据库的性能瓶颈，它使得一套集群的整体性能甚至不如一台单机。
2.9K61发布于 2020-01-17 - 来自专栏数据库架构之美
全面讲解分布式数据库架构设计特点
分布式数据库总体架构 分布式数据库总体设计有两个思路和方向，一个是基于共享存储的架构(share everything)，另一个是基于数据分片的架构(share nothing)。 这种架构的数据库严格意义上不能称之为分布式数据库。 SQL解析和转发，这是目前典型的分布式数据库架构，也是本文讨论的重点。 目前分布式数据库的总体架构设计基本都和下图相差不大，每种产品在不同组件的实现上存在差异，但大体架构上类似。 从图中可以看到分布式数据库三大组件：协调节点、数据节点、全局事务管理器。 下面分别介绍一下目前主流的分布式数据库的架构以及设计差异。
3.3K20发布于 2019-12-18 YashanDB分布式数据库网络架构及安全策略
随着数据规模的不断扩大和业务系统的复杂性增加，分布式数据库系统成为满足高性能、高可用和强一致性需求的关键技术。分布式数据库在性能瓶颈、数据一致性保证以及安全防护等方面面临诸多挑战。 YashanDB作为先进的分布式数据库产品，针对这些挑战设计了高效的网络架构和完备的安全策略。 本文旨在为开发人员和数据库管理员提供深入的技术分析，详细解析YashanDB的分布式网络架构和安全机制，助力读者理解其设计原理并应用于实际项目。一、YashanDB分布式数据库网络架构1. 3. 客户端连接与会话模式客户端通过多种驱动程序（JDBC、C、Python、ADO.NET、ODBC）连接至数据库实例。每个实例内部设有连接监听器线程，负责处理连接请求、会话分配和资源准备。 结论本文全面解析了YashanDB分布式数据库的网络架构设计及安全策略，详细介绍了分布式部署模式、内部通信机制及主备复制网络；并深入阐述用户管理、身份认证、访问控制、加密、审计及反入侵措施。
26610编辑于 2025-08-19- 来自专栏DDD
架构与架构师3
最近又看了几本关于架构的书籍，不禁回到原点：架构是什么？架构师职责是什么？ 、架构决策以及设计原则 系统结构 实现该系统的一种或多种架构风格（比如微服务、分层和微内核） 仅仅描述结构并不能完整地诠释架构，还需要了解架构特征、架构决策和设计原则 架构特征 架构特征定义了系统的成功标准 架构特征满足三个标准： 1.明确非领域设计的某个注意事项2.影响设计的某些结构项3.是否对应用的成功至关重要 构架决策 架构决策定义了一组关于如何构建系统的规则，构成了系统约束，并指导团队哪些可以做， 它需要知识以及应用知识的能力 2.影响力用来衡量架构师在项目中应用技能后给项目或公司带来多大的效益 3.领导力确保了架构实践的状态能稳步向前推进，同时培养更多的架构师 能力模型 论能力模型，与开发人员之间对技术方向的侧重有所不同 避免瓶颈陷阱方法之一是将关键路径和框架代码委托给开发团队其他人员，然后着重于实现业务功能（一个服务），并且在1~3个迭代中完成。 如何保持编码能力和一定水平的技术深度呢？
59730发布于 2021-11-12 - 来自专栏智能大数据分析
大数据存储技术（3）—— HBase分布式数据库
3、极易扩展 HBase 的扩展性主要体现在两个方面，一个是基于上层处理能力（RegionServer）的扩展，一个是基于存储的扩展（HDFS) 。 4、高并发 由于目前大部分使用HBase的架构，都是采用的廉价PC，因此单个IO的延迟其实并不小，一般在几十到上百ms之间。 （三）HBase架构 HBase架构如图所示。 （3）通过 Zoopkeeper 存储元数据的统一入口地址。 为了数据的持久化和恢复； 3、HregionServer 将数据写到内存（MemStore）； 4、反馈 Client 写成功。
1.3K10编辑于 2025-01-22 - 来自专栏cwl_Java
系统架构师论文-论分布式数据库的集成
论分布式数据库的集成 [摘要] 本文讨论了某公司发货系统的分布式数据库集成解决方案。该公司由于业务的发展，要在另三个城市设立货仓进行发货。为此，需要増加原先的MIS系统实现这一功能。 [正文] 2004年3月，由于公司业务的发展，要求在其它三个城市设立货仓，处理发货业务。公司本部运行用Sybase数据库的MIS系统可以实现发货，该系统用的是C/S结构。 二是进行系统设计，改变后数据分布如何，系统架构如何。最后是实现和测试，上线。整个项目历时从分析到实现历时三个月，最后于2004年6月份系统成功上线。 所以，这种数据库结构是典型的分布式数据库。部署这种分布式数据库不是难事，只要在客户端和服务器上安装12.0版本以上的数据库服务器，在客户端服务器上建立远程服务名和代理表即可。 将XML用在分布式数据库中，将是未来的一个趋势。
1.3K10发布于 2019-10-26 - 来自专栏AustinDatabases
TIDB 学习计划 --- 什么是分布式数据库和TIDB 整体架构
强一致的可水平扩展的关系型数据库，在TIDB 设计之初，聚焦了四个设计的要点 1 水平扩展， 在设计之初水平扩展是最基本的需求，通过添加机器的方式扩展，存储的能力和计算的能力 2 高可用， TIDB 作为分布式数据库 而是业务解决或者中间件解决，这样做比较难做到高效 4 SQL 支持，提供MYSQL 的支持，让整体使用数据库变得简单 下面是一张TIDB 的结构图 TIDB 存储引擎是TIKV 数据库存储引擎，采用了分层的架构来实现 1 transaction 2 MVCC 3 raft 4 local kv storage 容灾与特点 高度分层，底层为ROCKSDB，通过raft来进行数据存储的高可用， 高度分层的主要原因是可以更独立的进行层次的切换 3 TIDB SQL 引擎 下图是一张TIDB SQL 层的整体的图形。 具体可以参考下面的文档，总结出几句话 1 给与修改DDL 操作一个时间范围 2 在DDL 操作中，每个region都会提供两种状态,可以删除和可写状态 3 租约的概念，在系统中设定的租约到期后，需要重载
1.5K30发布于 2020-06-23 LLM架构管窥：3模式、3原理
研究3天，6篇笔记 【点我头像 查看文章列表】因为咱是懂架构的，所以借助架构模式理解LLM架构并不困难。倒是向量语义叠加、多头注意力原理，颇是费脑细胞。
23620编辑于 2025-12-31- 来自专栏愿天堂没有BUG（公众号同名）
微服务架构实战：可扩展分布式数据库集群的搭建
可扩展分布式数据库集群的搭建 我们所设计的每个微服务应用都能适应高并发的调用，所以它所连接的数据库也必须具有这种特性，才能组成一个高性能的有机整体。 下面我们就从数据库的安装开始，按步骤讲解如何在分布式环境中实现高可用架构设计。 = 10.10.10. 36: 3306@group1 proxy-slave-addresses.2 = 10.10.10.37:3306@group1 proxy-slave-addresses.3 前面各项配置参数的含义如表13-3所示。 OneProxy还有一个管理后台，在OneProxy启动之后，可以通过MySQL客户端进行登录。 本文给大家讲解的内容是微服务架构实战：可扩展分布式数据库集群的搭建 下篇文章给大家讲解的是微服务架构实战：可扩展分布式数据库集群的搭建，OneProxy分库分区设计、双机热备设计； 觉得文章不错的朋友可以转发此文关注小编
1.6K10编辑于 2022-10-28 - 来自专栏金融级分布式数据库TDSQL
腾讯分布式数据库TDSQL金融级能力的架构原理解读
为帮助开发者更好地了解和学习分布式数据库技术，2020年3月，腾讯云数据库、云加社区联合腾讯TEG数据库工作组特推出为期3个月的国产数据库专题线上技术沙龙《你想了解的国产数据库秘密，都在这！》 三月为TDSQL专题月，本文将带来直播回顾第一篇《腾讯自研分布式数据库TDSQL核心架构及特性拆解》。 视频内容 大家好，我今天分享的主题是基于计费海量场景自研演进的分布式数据库TDSQL的核心架构解读。 三、TDSQL核心架构 接下来我们了解TDSQL的架构以及模块划分。 2.TDSQL架构模块及其特性 我们再看一下核心架构。核心架构其实是上一个图的缩览，我们把核心的模块挑选出来。 [wbmkvszttx.png] 首先用户的请求通过负载均衡发往SQL引擎。
7.7K43发布于 2020-03-18 - 来自专栏IT技术分享社区
分布式数据库基础：分布式数据库故障
分布式数据库系统常见的故障主要有事务故障、系统故障、介质故障、网络引起的故障。 事务故障：计算溢出、完整性破坏、操作员干预、输入输出报错等。
2.7K00发布于 2021-02-08 - 来自专栏业余草
从零开始分布式数据库中间件打造读写分离架构
比如，我以前业务量小，我分了两个表，我现在想分 3 个表，是不是就要改动代码了？再比如，分布式事务是否支持等问题都会随着业务的发展给暴露出来。 所以，我们就需要重新迭代出符合业务高速发展的新的读写分离分布式架构。 不管你是否接触过分布式项目，分布式项目都想病毒一样的在传播，甚至一些项目因为“分布式”而分布式！ 当我们向分布式项目转变的时候，会暴露出各种各样的架构上的问题。但是也不要怕，现在开源大行其道，支撑分布式系统的各种中间件也逐渐多了起来。 分布式数据库中间件有很多，今天我先给大家讲一讲 Atlas。后面有时间了，再给大家讲其他的中间件。Atlas 有很多新特性非常符合分布式的业务和商业架构。 DB 的集群架构现在已经被 Atlas 中间件接管了。我们的程序只需要链接 Atlas 即可。上面配置的有 Atlas 监听的工作接口 IP 和端口。
85460发布于 2019-06-24 - 来自专栏ImportSource
掌握了LSM架构，你就掌握了90%的分布式数据库
一些分布式数据库比如Bigtable、HBase、LevelDB、SQLite4、Tarantool、RocksDB、WiredTiger（MongoDB新一代的引擎）、Apache Cassandra
1.4K20发布于 2020-11-03 - 来自专栏cwl_Java
系统架构师论文-论分布式数据库的设计与实现
论分布式数据库的设计与实现 [摘要] 本文通过XXX高速公路收费系统（以下简称收费系统），来论述分布式数据库的设计与实现。 3.测试 数据库设计好了，就要対它进行测试。
1.2K10发布于 2019-10-26 - 来自专栏AI人工智能
从MySQL到OpenTenBase：电商平台分布式数据库架构升级实战
从MySQL到OpenTenBase：电商平台分布式数据库架构升级实战 Hello，我是摘星！ 在彩虹般绚烂的技术栈中，我是那个永不停歇的色彩收集者。 在最近的一个大型电商平台项目中，我主导了从MySQL到OpenTenBase的完整迁移过程，这次技术选型和架构升级的经历让我对分布式数据库有了更深入的理解。 主要考虑因素包括： 图3：数据库技术选型象限图 架构对比分析 对比传统MySQL分库分表方案，OpenTenBase展现出明显优势： 图4：OpenTenBase分布式架构图 ️ 架构设计与实施 集群规划设计 对于正在考虑分布式数据库迁移的朋友们，我的建议是：充分评估业务需求，深入了解技术细节，制定详细的迁移计划，并准备好应对各种意外情况。 #分布式数据库 #数据库迁移 #电商架构 #PostgreSQL
48910编辑于 2025-09-17 - 来自专栏大大刺猬
redis(3)--架构 主从 & 哨兵
主从: redis主从 中文文档:http://www.redis.cn/topics/replication.html 一主一从架构 M -> S 一主多从的架构可以是: 第一种 : M -> S1 sentinel_simulate_failure_flags:0 master0:name=mymaster,status=ok,address=192.168.1.31:6379,slaves=2,sentinels=3 127.0.0.1:26379> 当前的master是192.168.1.31 有2个从节点, 3个哨兵 我们人工kill掉主节点: ps -ef | grep redis | grep sentinel sentinel_simulate_failure_flags:0 master0:name=mymaster,status=ok,address=192.168.1.32:6379,slaves=2,sentinels=3 127.0.0.1:26379> 发现主节点变成了192.168.1.32 2.3 投票 具体的投票规则和故障转移过程我就不讲了, 去看官网就是了 3.
70010发布于 2020-12-18
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号