- 综合排序
- 最热优先
- 最新优先
TBDS-DA数智平台：DA一体化架构驱动数据工程与数据科学融合
构建DA一体化平台整合开发治理运维 腾讯云推出TBDS-DA数智平台，以“DA一体化”架构为核心，提供四层解决方案： 一站式开发治理平台WeData：融合DataOps+MLOps+一体化CI/CD 量化验证一体化架构的应用价值 平台应用效果通过关键指标体现： 提数响应效率：智能问数功能将运营提数响应时间从3.5天（半周）缩短至0.5天（半天）（数据来源：原文“智能问数”部分“从半周等待到半天” 腾讯技术架构支撑DA智能升级 TBDS-DA数智平台的技术领先性体现在： 双架构设计：经典湖仓一体（批处理/流计算/交互式分析）与Data+AI一体架构（批处理|流计算|交互式|数据科学|LLM多负载 （数据来源：腾讯全球数字生态大会TBDS-DA数智平台发布材料）
11610编辑于 2026-04-21跨越数据与AI孤岛：TBDS-DA一体化架构破局大模型时代的数据开发与运维困境
构筑“Data+AI”一体化架构：以底层融合驱动多类型工作负载 为解决上述痛点，腾讯云正式发布 TBDS-DA数智平台。 该平台立足“融合创新”，将经典大数据平台（Hadoop生态）与大模型生态（集成DeepSeek、Llama、Qwen、Mistral等）进行深度整合，提供面向数据工程与数据科学的一体化解决方案。 量化研发与运营ROI：从底层架构到前端调用的全链路提效 基于TBDS-DA平台的部署，企业能够在系统稳定性、开发效率及运维成本优化上获得确定的量化业务指标收益（数据来源：腾讯全球数字生态大会 TBDS-DA 存储与计算架构降本： 平台依托智能多模湖仓双架构，实现 One Copy 支持 Data+AI 多类型工作负载。 平台打破了传统数据治理工具的边界，构建了以 DataAgent 为核心的引擎架构。通过提供统一数据语义层（知识图谱、多模态统一语义），TBDS-DA支持企业利用私域数据快速开发GenAI数据应用。
11110编辑于 2026-04-21- 来自专栏ADAS性能优化
Armv9安全新架构
Arm在今年3月份推出了ARmv9.Arm 期望Armv9架构将是未来3000亿颗基于Arm架构芯片的技术先驱，而Armv9架构中，ARM 提供了机密计算Arm Confidential ComputeArchitecture (Arm CCA)的安全新架构。 Arm CCA 是一系列硬件和软件架构创新，这些创新增强了Arm 对机密计算的支持。Arm CCA 是 Armv9-A架构的关键组件。 Arm CCA 提供额外的安全架构，即使在使用中也能保护数据和代码，并能够更好地控制谁可以访问数据和算法。 这项在 Armv9-A 中引入的技术将通过降低与共享数据相关的风险并帮助开发人员实施强大的隐私控制来帮助释放数据的真正力量和潜力。
1.2K20编辑于 2022-05-13 - 来自专栏京东技术
工程算法一体化平台架构实践
整个架构采用了一体化架构，所谓一体化是指整个算法、工程涉及的包括数据、系统等全链路打通，实现数据流的系统化流动，这种方式的好处是形成了业务闭环，在需求、开发、测试和验证整个过程都是透明化，从而减少沟通误差 工程&算法一体化平台 整个工程&算法一体化平台架构如图1所示，包括数据集&标注平台、算法模型训练&部署平台、模型测试&质量评估平台、算法服务网关、服装搭配平台，通过将这些平台全链路打通，形成一体化架构， 打标平台架构上一定要灵活，设计如图2所示，架构上一定要灵活，因为不同的场景其标注需求是不一样的，比如数据存储方面可以考虑像mongodb数据库，是模式自由的，数据存储结构非常灵活；在打标界面方面可以通过插件化模式进行设计 京东内部有一套自己的机器学习平台，该平台目前打通了京东的J-ONE（编译、上线发布、部署一体化的工具平台），可以通过J-ONE部署CPU或GPU应用，从而简化整个部署过程。 一体化平台架构的目的是形成业务闭环，统一数据语言，数据资产沉淀，数据全链路透明流通，数据抽样实时质量评估，提升算法质量。在整个过程中架构边界清晰，系统松耦合，通过闭环服务化内聚化降低组织间沟通成本。
3.6K31发布于 2019-05-05 - 来自专栏闲余说
架构设计 9-可扩展架构之分层架构
导读：《架构设计》系列为极客时间李运华老师《从0开始学架构》课程笔记。本文为第九部分。首先整体介绍可扩展架构的基本思想——“拆”，以及如何拆；随后介绍了面向流程的拆分，即分层架构。 典型架构：SOA & 微服务 面向功能拆分 方案：将系统提供的功能拆分，每个功能作为一部分 优势：对某个功能扩展，或者要增加新的功能时，只需要扩展相关功能即可，无须修改所有的服务 典型架构：微内核架构 分层架构 概念：分层架构是很常见的架构模式，它也叫 N 层架构，通常情况下，N 至少是 2 层。 根据不同的划分维度和对象可分为：C/S 架构&B/S 架构、MVC 架构&MVP 架构、逻辑分层架构。 C/S 架构、B/S 架构 划分的对象是整个业务系统 划分的维度是用户交互，即将和用户交互的部分独立为一层，支撑用户交互的后台作为另外一层 MVC 架构、MVP 架构 划分的对象是单个业务子系统 划分的维度是职责
91610编辑于 2022-08-19 - 来自专栏腾讯云存储
直播预告| Lakehouse 湖仓一体化架构论坛
在大模型时代，企业将如何进行湖仓一体化架构选型？下一代Lakehouse架构方向又在哪里？未来面临着怎么样的挑战？ 让我们在6月15日举办的以「大模型时代的 OLAP 技术演进」为主题的第58届DataFunSummit：OLAP 线上峰会中，「Lakehouse 湖仓一体化架构」论坛上看头部企业如何做！ 精彩内容，扫码报名，免费参会 本次Lakehouse湖仓一体化架构论坛的出品人程力老师，腾讯云数据湖存储的负责人，他对数据湖仓存储架构有着深入的理解与丰富的实践经验。 通过构建两级缓存架构与混合部署，让整个基于对象存储架构构建的查询性能与成本达到了较优的水平。 演讲提纲： 1.GooseFS 加速存储的核心架构 2.GooseFS 在腾讯内部实时 OLAP 搜索场景上的应用落地 3.GooseFS 在低延迟查询搜索请求上的架构演进与性能优化 4.总结 听众收益
54510编辑于 2024-06-16 模型设计、数据架构、数据治理一体化大数据平台
本文主要从总体思路、模型设计、数据架构、数据治理四个方面介绍了如何利用大数据平台的特性，构建更贴合大数据应用的数据仓库。 数据集市层是上下三层架构的最上层，通常是由需求场景驱动建设的，并且各集市间垂直构造。在数据集市层，我们可以深度挖掘数据价值。值得注意的是，数据集市层需要能够快速试错。 二、数据架构 数据架构包括数据整合、数据体系、数据服务三部分。其中，数据整合又可以分为结构化、半结构化、非结构化三类。 2.1.2 日志结构化 在传统的架构中，日志的结构化处理是放在数仓体系之外的。 尽管目前数仓架构体系中并不包含非结构化数据特征提取操作，但在未来，这将成为可能。
30810编辑于 2025-12-23- 来自专栏超级架构师
【服务网格架构】Envoy架构概览(9):访问日志,MongoDB,DynamoDB,Redis
异步IO刷新架构。访问日志记录不会阻塞主要的网络处理线程。 可定制的访问日志格式使用预定义的字段以及任意的HTTP请求和响应头。 alpha" 2) "bravo" 3) (error) upstream failure 4) (error) upstream failure 5) "echo" 微信公众号 关注微信公众号【首席架构师智库 】 微信小号 希望加入的群：架构，云计算，大数据，数据科学，物联网，人工智能，安全，全栈开发，DevOps，数字化，产品转型。 点击加入知识星球【首席架构师圈】 微信圈子 志趣相投的同好交流。 点击加入微信圈子【首席架构师圈】 喜马拉雅 路上或者车上了解最新黑科技资讯，架构心得。 点击，收听【智能时刻，架构君和你聊黑科技】 知识星球 认识更多朋友，职场和技术闲聊。 点击加入知识星球【知识和技术】
1.9K20发布于 2020-07-20 深入解析MySQL(9)——主从复制架构详解
把接收到的内容写入Relay Log Slave的SQL Thread读取Relay Log的内容 Slave的SQL Thread解析日志并转为SQL进行回放操作，把数据写入Databases 1.4 高性能架构 The following signatures couldn't be verified because the public key is not available: NO_PUBKEY 7EA0A9C3F273FCD8 简单来说，这个错误的意思是：“阿里云给了我Docker的软件列表，并且说这是用7EA0A9C3F273FCD8这个钥匙签名的，但是我的钥匙串里没有这把钥匙，所以我无法确认这是不是真的Docker官方列表 解决方法： 把Docker官方的公钥添加到你的系统中 apt-key adv --keyserver keyserver.ubuntu.com --recv-keys 7EA0A9C3F273FCD8 > start replica; # 查看从服务器状态 mysql> show replica status\G; 4.下节预告 深入解析MySQL(10)——基于ShardingSphere的高性能架构详解
26310编辑于 2026-01-13- 来自专栏平凡文摘
高可用高并发的 9 种技术架构！
1、分层 分层是企业应用系统中最常见的一种架构模式，将系统在横向维度上切分成几个部分，每个部分负责一部分相对简单并比较单一的职责，然后通过上层对下层的依赖和调度组成一个完整的系统。 在网站的分层架构中，常见的为3层，即应用层、服务层、数据层。应用层具体负责业务和视图的展示；服务层为应用层提供服务支持；数据库提供数据存储访问服务，如数据库、缓存、文件、搜索引擎等。 分层架构是逻辑上的，在物理部署上，三层架构可以部署在同一个物理机器上，但是随着网站业务的发展，必然需要对已经分层的模块分离部署，即三层结构分别部署在不同的服务器上，是网站拥有更多的计算资源以应对越来越多的用户访问 所以虽然分层架构模式最初的目的是规划软件清晰的逻辑结构以便于开发维护，但在网站的发展过程中，分层结构对网站支持高并发向分布式方向的发展至关重要。 ? 9、缓存 缓存目的就是减轻服务器的计算，使数据直接返回给用户。在现在的软件设计中，缓存已经无处不在。具体实现有CDN、反向代理、本地缓存、分布式缓存等。
77250发布于 2018-07-03 - 来自专栏Java课堂
9 张图总结一下 MySQL 架构
所以解析与优化的职责如下： 缓存 SQL语法解析验证 SQL优化并生成执行计划 根据执行计划调用存储引擎接口 其中连接管理与解析与优化处于MySQL架构中的Server层。 MySql架构分为Servce层与存储引擎层。 连接管理、解析与优化这些并不涉及读写表数据的组件划分到Servce层，读写表数据而是交给存储引擎层来做。 通过这种架构设计，我们发现Servce层其实就是公用层，存储引擎层就是多态层，按需选择具体的存储引擎。 阿星最后以一张MySQL简化版的架构图结束本文，我们下期再见~ 我是小富～，如果对你有用在看、关注支持下，咱们下期见~ 非常感谢各位小哥哥小姐姐们能看到这里，原创不易，文章有帮助可以关注、点个赞、
6K41发布于 2021-09-24 - 来自专栏Python
(9) MySQL主主复制架构使用方法
从数据库和主数据库的数据最终会是一致的 之所以说是最终一致，因为mysql复制是异步的，正常情况下主从复制数据之间会有一个微小的延迟 通过这个数据库副本看似解决了数据库单点问题，但并不完美 因为这种架构下 引入vip后的数据库架构 最简单的方式就是给数据库复制集群上增加一个虚拟ip 虚拟IP(vip): 就是一个未分配给真实主机的ip，也就是说对外提供服务器的主机除了有一个真实IP外还有一个虚拟IP 而前端应用程序使用虚拟 master(也就是老的slave)进行同步，就不得不重新配置主从复制了，特别是在基于日志点的复制情况下，这时候如果我们数据库的数据量非常大，在这种情况下，重新初始化数据也是比较耗时的 所以我们要对主从复制的架构进行一些更改 从哪个值开始 这样修改后，id将会变成2,4,6,8...的形式 Keepalived简介 Keepalived基于ARRP网络协议，ARRP可以将2台设备虚拟成一个设备，可对外提供一个虚拟IP，也就是我们架构中的 目前架构存在的问题 目前架构： 一台主服务器，一台从服务器，加入了keepalived服务来监控主从服务器的运行健康状态，并通过keepalived服务器生成了一个虚拟IP，前端应用是通过虚拟IP来进行数据库的访问
1.1K20发布于 2019-05-25 - 来自专栏Java技术栈
高可用高并发的 9 种技术架构！
在网站的分层架构中，常见的为3层，即应用层、服务层、数据层。应用层具体负责业务和视图的展示；服务层为应用层提供服务支持；数据库提供数据存储访问服务，如数据库、缓存、文件、搜索引擎等。 分层架构是逻辑上的，在物理部署上，三层架构可以部署在同一个物理机器上，但是随着网站业务的发展，必然需要对已经分层的模块分离部署，即三层结构分别部署在不同的服务器上，是网站拥有更多的计算资源以应对越来越多的用户访问 所以虽然分层架构模式最初的目的是规划软件清晰的逻辑结构以便于开发维护，但在网站的发展过程中，分层结构对网站支持高并发向分布式方向的发展至关重要。 ? 9、缓存 缓存目的就是减轻服务器的计算，使数据直接返回给用户。在现在的软件设计中，缓存已经无处不在。具体实现有CDN、反向代理、本地缓存、分布式缓存等。 -END- 不错，转发分享一下吧 往期推荐 【1】京东购物车的 Java 架构实现及原理 【2】分布式作业 Elastic-Job 从理论到实战 【3】《阿里技术参考图册》发布，速度收藏 【4】最新后端架构师技术图谱
66250发布于 2018-07-31 （一体化架构有疑问）
是什么让这个简单的架构变得如此特别以至于它被过度炒作？将整个正在运行的应用程序从一体化转移到微服务架构是否值得付出的努力和痛苦？当我们开始在项目中使用微服务时出现了很多类似的问题。 在本博客中，我们将尝试回答这些问题并深入研究微服务架构，并将其与一体化架构进行比较。 什么是微服务？它与一体化有何不同？ [2gvoo5y4nn.jpeg] 微服务是小型自主服务工作的集合。 使用一体化架构，我们无法独立扩展每个组件，因此即使大多数组件可能不需要扩展，整个应用程序也需要进行扩展。 可靠性 - 一体化应用的另一个问题是可靠性。 [9gt7qqzl9b.png] 现在我们已经遇到了在使用一体化应用程序时可能会遇到的一些问题。那么微服务能解决这些问题吗？他们是否做的更好或者只是另一个被炒作的架构？ 现在我们对一体化和微服务是什么以及他们的优缺点有一个大概的认识。 [k0h9rd7vla.png] 总而言之，一体化架构更适合简单轻量级的应用。
1.7K50发布于 2018-06-25- 来自专栏Java编程指南
大型Web网站架构演变之9大阶段
应用服务器与数据库分开后的架构如下图所示： ? 阶段三、应用服务器集群 随着访问量继续增加，单台应用服务器已经无法满足需求了。 9)、LBLC基于局部性最少连接算法 负载均衡器根据请求的目的IP地址，找出该IP地址最近被使用的服务器，把请求转发之。若该服务器超载，最采用最少连接数算法。 只有认真的分析和不断地探究，才能发现适合自己网站的架构。
78020发布于 2019-08-05 - 来自专栏超级架构师
Envoy架构概览(9):访问日志,MongoDB,DynamoDB,Redis
异步IO刷新架构。 访问日志记录不会阻塞主要的网络处理线程。 可定制的访问日志格式使用预定义的字段以及任意的HTTP请求和响应头。
2.7K30发布于 2018-04-09 - 来自专栏嵌入式ARM和Linux
ARMv9-机密计算架构(CCA)深入理解
1 概述 2 背景知识 3 什么是机密计算 4 ARM CCA扩展 5 CCA硬件架构 6 CCA软件架构 7 问题 1 概述 在本文中，我们看一下现代计算系统中机密计算的角色，以及实现原理。 这时候，就需要考虑ARM CCA架构了。 ARM CCA架构允许安全架构师将工作负载安全地部署到云服务器上，而无需考虑底层代码的可信度。底层代码包括hypervisor或运行在安全空间的代码。 ARM CCA架构是通过硬件扩展和特殊固件达到的这种隔离。 在ARM CCA架构中，这种硬件扩展成为Realm 管理扩展(RME)。 CCA架构作为ARMv9-A的一部分，引入RME（Realm管理扩展）。该扩展引入了两个额外的空间，Realm空间和root空间。 Root空间是Root安全状态和Root物理地址空间的组合。 6 CCA软件架构 ARM的CCA架构带来了组件的增加，比如RME，再比如固件，尤其是Monitor和RMM。本段介绍CCA架构的软件栈。
5.7K20编辑于 2022-08-15 - 来自专栏大数据解决方案
实时离线一体化技术架构(万字，15张图）
： 架构实现 数据实时同步—Confluent Platform架构实现 debezuim：业务库使用的是MySql,如果在即时查询系统中查询到的结果与业务系统查询结果同等，需要实时同步业务数据，并实时提供查询能力 7051,cdh6-slave4:7051,cdh6-slave5:7051,cdh6-slave6:7051,cdh6-slave7:7051,cdh6-slave8:7051,cdh6-slave9: 实时离线一体化系统之技术架构 实时离线一体化系统之数据流 实时离线一体化接入 大数据的来源主要分为三个： 第一个来源是内部系统的Mysql数据库(业务分析) 第二个来源是应用App(用户轨迹) 这个问题跟我们的需求演化和公司系统架构有关系，presto从支持标准的sql上看，可以减轻业务侧对现有的功能sql改造，简单来说就是为了兼容现状。 展望未来 1、基于整合后的架构，未来我们可以提供更多的能力，让更多的存储引擎支持Hive Metastore，使HMS的元数据服务支持丰富化。
2.2K20发布于 2021-10-22 架构师的“9域43项”能力模型
1 腾讯云社区的【架构能力模型】文章汇总 2 架构岗位的层次&能力模型 3 产品架构师能力模型（9域43项） 4 产品架构师成长阶梯（从后备到专家，共5级） 5 英雄帖：邀您扩充模型AI相关能力组、能力项 我后面能力模型有块分解、链分解等，算是部分呼应 文3：从【业务】到【管理】到【技术】共六组能力 2 架构岗位的层次&能力模型 细说的话，架构师能力不止一个模型，看岗位。 例如下图（总架构师、领域架构师、产品或系统架构师），下下图（方案架构师、产品架构师）。 图片 图片 3 产品架构师能力模型（9域43项） 软能力：思维力、文档力、沟通力 支撑组：技术力、设计力、工程力 高级组：经验力、督导力、创造力 4 产品架构师成长阶梯（从后备到专家，共5级） 图片 图片 例如，架构风险评估。 例如，提示模板定制、提示模板与架构模板统一设计。 例如，伦理与道德相关的评估。
25.5K73编辑于 2025-05-11- 来自专栏JAVA高级架构
9种高性能可用高并发的技术架构
1、分层 分层是企业应用系统中最常见的一种架构模式，将系统在横向维度上切分成几个部分，每个部分负责一部分相对简单并比较单一的职责，然后通过上层对下层的依赖和调度组成一个完整的系统。 分层架构是逻辑上的，在物理部署上，三层架构可以部署在同一个物理机器上，但是随着网站业务的发展，必然需要对已经分层的模块分离部署，即三层结构分别部署在不同的服务器上，是网站拥有更多的计算资源以应对越来越多的用户访问 所以虽然分层架构模式最初的目的是规划软件清晰的逻辑结构以便于开发维护，但在网站的发展过程中，分层结构对网站支持高并发向分布式方向的发展至关重要。 ? 异步架构的典型就是生产者消费者方式，两者不存在直接调用。 9、缓存 缓存目的就是减轻服务器的计算，使数据直接返回给用户。在现在的软件设计中，缓存已经无处不在。具体实现有CDN、反向代理、本地缓存、分布式缓存等。
722110发布于 2018-04-19
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号