首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏腾讯云流计算 Oceanus

    TDSQL-subscribe-connector最佳实践(上)

    本文介绍了如何在 Oceanus 平台使用 tdsql-subscribe-connector 1 ,从 TDSQL-MySQL 订阅任务 2 创建,到 Oceanus 作业创建、最终数据验证,实现全流程的操作指导 需要注意的是,本文默认已经创建 TDSQL-MySQL 实例和 Oceanus 集群,并且二者在同一 VPC 下或者不同 VPC 下但网络已经打通。 [1-tdsql-subscribe-connector数据流程图.png] 上述流程图简要说明了使用 tdsql-subscribe-connector 时,整个数据流向情况。 TDSQL 的 binlog 数据,会通过订阅任务发送到 Kafka(这里的 Kafka 已经包含在订阅任务中,无需重新创建实例),然后 Oceanus 可以通过 tdsql-subscribe-connector 和 Oceanus 的 VPC 需要连通或者使用同一 VPC; 使用 tdsql-subscribe-connector 前,需要构建数据订阅任务; tdsql-subscribe-connector

    1.1K100编辑于 2022-05-17
  • 来自专栏个人技术专栏

    【腾讯云 TDSQL-C Serverless 产品体验】TDSQL-C MySQL Serverless最佳实践

    借助《腾讯云TDSQL-C联合CSDN产品测评活动》,让我们来深入了解并实践一下TDSQL-C MySQL Serverless数据库,利用产品的资源用量低、简单易用、弹性灵活和价格低廉等优点和特性,赋能业务合理优化使用成本 TDSQL-C MySQL Serverless数据库实例的优势:与普通MySQL数据库实例相比,TDSQL-C MySQL Serverless数据库实例有如下6点明显的优势:优势:①. 3.2 传统TDSQL-C Serverless架构中的自动扩缩容方案:而上图右侧TDSQL-C Serverless架构中,用户在购买时选择最小规格为1核2G,最大规格为4核8G。 基于以下两点,TDSQL-C Serverless可以很好应对自动扩缩容:TDSQL-C Serverless自动扩缩容方案:①. 五、TDSQL-C MySQL Serverless弹性伸缩实验:下面将按照以下5个大的步骤进行对TDSQL-C MySQL Serverless的一个压力的测试过程。

    14.5K861编辑于 2023-11-14
  • 来自专栏腾讯云大数据

    Flink 最佳实践TDSQL Connector 的使用(上)

    作者:姚琦,腾讯 CSIG 工程师 本文介绍了如何在 Oceanus 平台使用 tdsql-subscribe-connector [1] ,从 TDSQL-MySQL 订阅任务 [2] 创建,到 Oceanus 需要注意的是,本文默认已经创建 TDSQL-MySQL 实例和 Oceanus 集群,并且二者在同一 VPC 下或者不同 VPC 下但网络已经打通。 上述流程图简要说明了使用 tdsql-subscribe-connector 时,整个数据流向情况。 TDSQL 的 binlog 数据,会通过订阅任务发送到 Kafka(这里的 Kafka 已经包含在订阅任务中,无需重新创建实例),然后 Oceanus 可以通过 tdsql-subscribe-connector 和 Oceanus 的 VPC 需要连通或者使用同一 VPC; 使用 tdsql-subscribe-connector 前,需要构建数据订阅任务; tdsql-subscribe-connector

    1.6K20编辑于 2022-04-22
  • 来自专栏腾讯云数据库(TencentDB)

    HTAP大潮下,TDSQL的探索与实践

    同时,论坛上,腾讯云数据库高级工程师陈再妮带来了主题为“TDSQL在HTAP领的探索与实践”的演讲分享,以下为分享回顾。 前文提到了很多分布式解决方案会把数据拉取到一个节点,进行关联计算,TDSQL-PG并没有采用这种耗费资源且性能不高的方法。那么 TDSQL-PG是如何处理这种情况的呢? 以下介绍TDSQL PG在高速并行计算方面的工作。 TDSQL-PG水平拓展应用 ? 1 三、TDSQL-PG最佳应用实践 1. 微信支付 ?

    1.3K30发布于 2021-06-02
  • 来自专栏技术运维分享

    Code Review在TDSQL-C 的应用实践

    了解完code review及其难点后,接下来简单介绍下TDSQL-C以及code review在TDSQL-C存在哪些难点。 1.3 TDSQL-C是什么? 前面讲了TDSQL-C相对传统数据库的优势,那么接下来讲讲code review在TDSQL-C存在哪些难点? 架构的巨大改变带来了以下问题: TDSQL-C基于开源MySQL(系统复杂,项目总代码数百万级别),重构了日志系统,IO模块,事务模块,启动流程等多个模块,代码改动量巨大 TDSQL-C项目包括计算层 TDSQL-C CodeReview规范优化 前面介绍完了TDSQL-C的code review流程,接下来讲一下我们TDSQL-C在多年的code review实践中做的一些改进。 TDSQL-C使用入口请点击左下角【阅读原文】,欢迎大家使用!

    89850发布于 2021-07-12
  • 来自专栏腾讯技术工程官方号的专栏

    TDSQL在微众银行的大规模实践之路

    Why TDSQL? 为什么会选用TDSQL,作为微众银行的核心数据库呢?本章节将会详细介绍TDSQL架构、以及TDSQL的核心特性,看看TDSQL是如何满足了金融级场景的数据库要求。 TDSQL集成了TDSQL Agent、TDSQL SQLEngineSQLEngine、TDSQL Scheduler等多个模块,实现了读写分离、AutoSharding、自动主备强一致性切换、自动故障修复 TDSQL架构模型如图1所示: 图1 TDSQL架构模型与SET模型 我们可以从横向和纵向两个维度来理解TDSQL的架构。 纵向是TDSQL集群的管理路径:TDSQL的一个管理单元称为一个set,每个set单元的每个数据库实例上,都会部署一个TDSQL Agent模块。 微众银行通过实践证明,TDSQL作为金融级的核心数据库,是完全胜任的。

    1.7K61发布于 2019-08-20
  • 来自专栏腾讯云数据库(TencentDB)

    直播预告 | TDSQL SQL引擎架构演进与查询优化实践

    直播互动福利:每晚直播间也同样会送出多份腾讯公仔,更有腾讯徽章、腾讯云代金券等好礼送上!快快预约报名吧! 扫码关注后回复「加群」 提前加入沙龙交流群 点击下方「阅读原文」,预约所有中意直播!

    53050发布于 2020-03-25
  • 来自专栏云计算行业

    TDSQL应用实践与人才培养 | 第641期预告

    数据库产品专家秦玮免费直播课程 戳【阅读原文】或识别【二维码】预约直播 具体报名认证考试详情请查看往期回顾  培训认证|腾讯云TDSQL、TBase初级认证发布,限时免费 2020-11-17

    26430编辑于 2023-05-29
  • 来自专栏金融级分布式数据库TDSQL

    亿级流量下平滑扩容:TDSQL水平扩容方案实践

    ,邀请数十位鹅厂资深数据库专家每周二和周四晚上在线深入解读TDSQL、CynosDB/CDB、TBase三款鹅厂自研数据库的核心架构、技术实现原理和最佳实践等。 本文将带来直播回顾第三篇《亿级流量场景下的平滑扩容:TDSQL的水平扩容方案实践》。 视频内容 话不多说,我们正式进入今天的分享。 接下来大家带着这些问题,下面我会介绍TDSQL如何进行水平扩容,它又是如何解决刚才说的这些问题的。 2 TDSQL水平扩容实践 首先我们看一下TDSQL的架构。 以上第三章我们比较详细地介绍了TDSQL整个水平扩容的一些原理,比如数据如何进行拆分,水平扩容实践,以及如何解决扩容过程中的问题,同样也介绍水平扩容以后带来的一些问题,TDSQL是如何解决的。 4.2 实践:什么时候扩容? 我们什么时候扩容?在TDSQL里面,我们会有大量的监控数据,对于各个模块我们在本地会监控整个系统的运行状态,机器上也会有各种日志上报信息。

    2.7K43发布于 2020-04-09
  • 来自专栏腾讯云智能顾问

    【最佳实践】巡检项:TDSQL MySQL 版账号高危命令限制

    在日常数据库管理中,DROP,DELETE这类命令属于高危命令,因此需要各位注意并谨慎评估后操作。

    1.3K20编辑于 2022-04-28
  • 来自专栏年轻人怎么睡得着的

    ​【TDSQL-C MySQL实践】实现剪切板历史存储

    前言最近因为工作开始使用mac,但mac上没有windows上的剪切板历史功能,虽然mac有其他软件才能实现但是使用非常不习惯,本篇文章主要用python实现读取剪切板并上传到腾讯云的TDSQL-C MySQL 现在正赶上学生优惠可以超低价购入TDSQL-C MySQL,1c1g的一年仅需26元,并可以以此价格续费3次,也就是说104元可以4年,其10g的存储完全够用剪切板历史,还可以存储其他东西!!

    53680编辑于 2023-10-19
  • 来自专栏腾讯云数据库(TencentDB)

    一文详解TDSQL PG版Oracle兼容性实践

    目前TDSQL PG版已经在金融、保险、通信、税务、政务等多个行业的核心交易系统上线运行。 TDSQL PG版介绍 1. 此外,TDSQL PG版的三权(安全、审计、管理)分立安全体系也充分满足企业对数据安全的需求。 TDSQL PG版具有六个方面的产品特性: 访问接口丰富。 在满足这些业务特征的情况下,TDSQL PG版将会是合适的选择。此外,TDSQL PG版也适用于地理信息系统、实时高并发系统以及数据库国产化等场景。 上图为TDSQL PG版的总体架构。 业务上线前期,我们采用双轨运行,支持从Oracle到TDSQL PG版以及从TDSQL PG版到Oracle的数据同步。 ﹀ ﹀ ﹀ -- 更多精彩 -- 云原生数据库TDSQL-C PostgreSQL版内核解密 揭秘TDSQL-A:兼容Oracle的同时支持海量数据交互 海量数据,极速体验——TDSQL-A核心架构详解来了

    3.4K20编辑于 2021-12-15
  • 来自专栏个人技术文章

    【腾讯云 TDSQL-C Serverless 产品测评】- 云原生时代的TDSQL-C MySQL数据库技术实践

    一、活动介绍:“腾讯云 TDSQL-C 产品测评活动”是由腾讯云联合 CSDN 推出的针对数据库产品测评及产品体验活动,本次活动主要面向 TDSQL-C Serverless版本,初步的产品体验或针对TDSQL-C ---四、TDSQL-C介绍:从最上面活动的截图,我们先大致了解一下,TDSQL-C是什么?TDSQL-C有什么样的作用呢?以下是我的一个总结,可以先了解一下TDSQL-C的基本功能、场景、作用。 产品到期继续使用:购买后TDSQL-C MySQL,因为要忙工作,一时忘记了TDSQL这个东西,可以看到数据库一直还会产生费用。 我也是在通过活动、自己动手操作手册、自己在项目中实践TDSQL-C MySQL 8.0,从0到1的由浅到深的了解,从一些论点实际去操作,了解到TDSQL-C MySQL确实能给我们的业务带来提效降本的方案 ,希望在以后能够在业务中去落地并实践TDSQL-C MySQL。

    14K2821编辑于 2023-08-30
  • 来自专栏腾讯云数据库(TencentDB)

    TDSQL 在微信支付数据密集型应用落地实践

    那微信支付应用TDSQL PG版的过程中经历了哪些故事?TDSQL PG版在微信支付系统中又有哪些典型应用案例呢? 1 微信支付与TDSQL PG版的陪跑历程 “如果要用一个形容词来描述微信支付与TDSQL PG版的关系,那就是‘你侬我侬’。” 在容量问题上,TDSQL提供了海量数据存储的在线线性扩容能力;在大商户的数据倾斜问题上,TDSQL基于双KEY分布等机制解决了数据存储均匀分布的问题;在分页查询性能问题上,TDSQL提供了基于Index 2 TDSQL PG版在微信支付的应用实践 近年来,TDSQL PG版助力微信支付构建数据密集型应用,持续拓展应用场景,在多个领域体现出比较优势,保证了业务的稳定性和连续性。 在此以报表系统和维表系统为例介绍TDSQL PG版在微信支付的应用实践

    87220发布于 2021-08-30
  • 来自专栏Lansonli技术博客

    腾讯云数据库TDSQL——博客数据库迁移实践

    博客banner6.jpg 博客数据库迁移实践 前言 延续之前博客的风格,留下两段语录 博主语录:一文精讲一个知识点,多了你记不住,一句废话都没有 经典语录:如果你认识从前的我,那么你就会原谅现在的我 一、产品概述 TDSQL-C MySQL 版(TDSQL-C for MySQL)是腾讯云自研的新一代云原生关系型数据库。 TDSQL-C MySQL 版引擎完全兼容原生 MySQL,您可以在不修改应用程序任何代码和配置的情况下,将 MySQL 数据库迁移至 TDSQL-C MySQL 版引擎。 这里就简单介绍TDSQL-C产品,需要深入了解和操作可进入文档链接自己学习: TDSQL-C MySQL 版 产品概述 - 产品简介 - 文档中心 - 腾讯云 https://cloud.tencent.com /document/product/1003/30488 二、 TDSQL简介 1、整体架构 2、组件 TDSQL整套系统包含的组件有: 组件缩写 组件名称 备注 Zookeeper zookeeper

    5.6K43编辑于 2022-04-29
  • 来自专栏腾讯云数据库(TencentDB)

    腾讯云TDSQL斩获可信云技术最佳实践

    、128TB海量分布式智能存储、保障数据安全可靠等优势,在云原生数据库领域斩获2020-2021年度可信云技术最佳实践案例奖。 TDSQL-C 通过支持计算节点的快速弹性扩展和故障恢复。可以秒级完成纵向扩展 (Scale Up)和横向扩展(Scale Out)。 国内领先的第三方电子合同平台法大大的核心业务就运行在TDSQL-C上。 业务数据从MySQL数据库迁移至TDSQL-C后,法大大业务侧实现了零改造成本的迁移,不用做任何的改造即可实现海量历史数据的归档及实时查询。 TDSQL-C的云分布式存储服务的弹性及海量存储的能力很好地解决了传统MySQL存储容量的问题,而基于快照的备份方式也很好地实现了大数据量的备份及按时间点恢复TDSQL-C采用读写分离架构,支持应用服务器并发访问

    77540发布于 2021-07-29
  • 来自专栏腾讯云数据库(TencentDB)

    TDSQL全球灵活部署实践

    、CDB/CynosDB、TBase三款鹅厂自研数据库的核心架构、技术实现原理和最佳实践等。 本文将带来直播回顾第七篇,分享TDSQL的部署实践。 ? 大家好,我是腾讯云TDSQL DBA毕汉斌。我们本次是围绕着TDSQL交付的话题分享三个方面内容。 1.2 多场景适应性交付  第二个挑战来自于TDSQL多个场景。 ? TDSQL多个场景主要来源于使用TDSQL的对象是不同的,包括个人、企业、第三方平台。 1 PartⅡ TDSQL自动交付方案: 全球灵活部署,最快9分钟 ? 针对上述的挑战,TDSQL沉淀出了一套TDSQL自动化交付方案。 当前TDSQL维护了一套告警模板,也给客户提供了可配置的、定制化的选项,客户可以根据自己的实际情况进行告警策略的修改;同时提供基于实践经验积累的告警策略对比,以防用户做出不合理的修改,暴露告警策略的潜在风险

    1.3K30发布于 2020-06-24
  • 来自专栏腾讯云数据库(TencentDB)

    品牌升级后,TBase更名为TDSQLTDSQL-A,CynosDB更名为TDSQL-C

    腾讯云企业级分布式数据库TDSQL品牌升级后,共有三大产品系列,分别为分布式数据库TDSQL、分析型数据库TDSQL-A、云原生数据库TDSQL-C,将原TDSQL、TBase、CynosDB产品统一整合成 TDSQLTDSQL MySQL版为原TDSQLTDSQL PostgreSQL版为原TBase OLTP版及HTAP版;TDSQL-A PostgreSQL 版为原TBase OLAP版,并新增 ClickHouse 因此,我们将TDSQL、TBase和CynosDB正式升级为腾讯云企业级分布式数据库TDSQL,全新升级后的TDSQL将在多元场景下实现多引擎共存,充分发挥各个引擎的特点及优势,实现极致的性能和通用。 所以目前的企业级分布式数据库TDSQL是腾讯云数据库战略升级的产物,由TDSQL、TBase和CynosDB融合而成,集成了原TDSQL、TBase和CynosDB的优势,与之前主打金融级高可用的TDSQL

    4K20发布于 2020-12-28
  • 来自专栏腾讯云数据库(TencentDB)

    TDSQL inside之路

    TDSQL、计算与存储分离的云原生数据库 TDSQL-C 等产品,获得了云原生技术、多租户隔离能力。 TDSQL inside之路 回到2014年,这一年对于TDSQL有着特殊的意义。 这一年,不仅成功支持央视春晚,还成功接下了为微众银行提供数据库支持的项目,打出了TDSQL冲击金融领域的第一枪。 随着越来越多机构选择TDSQL,一个个大单的落地,越来越多国民级应用系统平稳运行在TDSQL之上,TDSQL给行业带来了对国产数据库的强劲信心。 而来自客户的声音更让人信服和感动:“2019年我们选择TDSQL的时候,还会担心选择是不是对的,今年就完全没有这个疑问了,选择TDSQL,很稳。” TDSQL 在微信支付数据密集型应用落地实践 泛微与腾讯云TDSQL完成互认证,助力金融行业实现安全高效的协同办公

    81220发布于 2021-09-10
  • 农商行渠道融合中TDSQL数据库选型的实践与效能

    undefined技术支撑以TDSQL数据库为基础设施,目标实现一致高可用、高SQL兼容度、分布式水平扩展、高性能、完整分布式事务支持、企业级安全(项目建设目标)。 量化TDSQL应用下的业务效能提升 TDSQL两地三中心容灾架构为核心技术载体(数据来源:赞同科技股份有限公司 2024 TENCENT GLOBAL DIGITAL ECOSYSTEM SUMMIT) 性能表现:经TPCC官方实测,TDSQL性能峰值可达 8.14亿 tpmC,在8小时持续压测中tpmC波动率<0.2%;支持主流高性能企业级硬盘、网络设备。 阐释选择腾讯云TDSQL的核心依据 技术确定性:TDSQL具备高可用(任意组件主节点故障自动恢复,无需人工干预)、高可靠(强同步复制确保数据不丢失)、高性能(TPCC实测峰值8.14亿tpmC)、灵活扩展

    10810编辑于 2026-04-08
领券