首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏腾讯云中间件专家服务

    客户案例—zookeeper迁移方案

    在至少有一个Leader存在的前提下,进行Zookeeper的在线增量、在线减量、在线迁移 在全过程中ZooKeeper不停止服务 注意事项 首先,当我们要从3台扩充到5台时,应保证集群不停止服务。 3台不停止服务的最低限度是2台(X/2+1),而5台的最低限度是3台。 我们应该保证,集群中最低有3台ZooKeeper是启动的。 -kafka-ds-03 10.1.24.114 idc02-kafka-ds-04 JDK jdk1.7.0_67 ZooKeeper zookeeper-3.4.6 Myid 根据IP自增为1-5 然后只要将现在的5台再缩小到3台且不包括原本myid为1-2的机器,就完成了迁移 将5台缩小回3台 修改idc02-kafka-ds-02 根据前面的注意事项,我们此时5台集群中启动的数量不得少于3台, 因此我们需要先修改3-5号机器的配置文件为3台,再关闭1-2号机器 关闭 12345 [hadoop@idc02-kafka-ds-02 bin]$ .

    2.4K51发布于 2021-07-26
  • 来自专栏开元说说

    系列(六)——数据存储建设

    数据存储建设主要从数据可靠性和业务稳定性两个维度阐述。这两者有哪些区别呢?

    4.8K73发布于 2021-11-18
  • 来自专栏云容灾云灾备

    什么是云?与传统备有何不同?

    不仅提供数据备份功能,还结合计算、存储、网络等云服务能力,允许企业在云端快速部署环境,并进行自动化业务恢复。二、传统 vs. 云在云出现之前,企业通常采用传统方案,如自建异地备中心或租用备机房。 相比之下,云基于云计算技术,充分利用云平台的弹性和智能化能力,提供了一种更灵活、高效的备解决方案:对比项传统基础设施自建或租用物理备中心依赖云服务,无需额外硬件成本投入高昂的硬件、机房 当业务负载增加时,环境可以根据需求自动扩展计算能力,实现无缝升级。此外,云还支持按需付费,避免了传统备方案中资源闲置的问题。3. 例如,AI 可以分析历史数据,智能调配备资源,以确保最优的恢复时间目标(RTO)和恢复点目标(RPO)。5.

    53610编辑于 2025-08-06
  • 来自专栏开元说说

    系列(三)——云网络建设

    IDC时代,业务对网络参与较少,主要依赖数据中心网络建设程度;当到了云的时代,云服务商将底层网络能力产品化后,云上客户更多参与网络建设,提升业务稳定性。 本文从云网络概述,云网络复杂度以及典型案例来介绍云网络建设。 1.云网络概述 云网络概述主要分为云服务商基础设施网络架构和云产品两部分,让云上客户更加深入了解云网络,用好云网络。 2)跨区或者跨地域云基础设施能力。 通常云服务厂家数据中心建设均有能力,这里建议还是选择大厂。 3)IDC到云上网络高可用建设。 混合云模式,这里考虑到IDC和云上线路灾情况,一般建议两条专线接入不同的POP点来进行建设;同时建立VPN或者GRE公网逃生通道来紧急恢复业务。 image.png 3.2 混合云网络 混合云网络分为两个部分: 1)idc和云机房之间线路,主要线路分为专线和VPN。

    6K93发布于 2021-08-09
  • 来自专栏云计算文章

    的架构分析和选择策略

    1.传统中心的架构 半径是衡量方案所能承受的灾难影响范围的指标。不同灾难的影响范围是不同的,而距离也会影响到技术的选择。 中心的架构按照源备端之间的距离,可分为本地、同城双活、两地三中心。 1.1本地 本地一般指主机集群,当某台主机出现故障,不能正常工作时,其他的主机可以替代该主机,继续正常对外提供服务。 2.级别与能力 系统按保护级别可分为:数据级、应用级、业务级。 2.3业务级 业务级是全业务的,除了必要的IT相关技术,还要求具备全部的基础设施。 4.云级别和能力 参考传统的级别划分,由于云的基础设施采用了云平台,在云的级别划分上,应用级和业务级的区别已经不大了,因此在这里将云级别分为:数据级、业务级

    4K30编辑于 2022-04-29
  • 来自专栏开元说说

    系列(八)——同城数据冷备建设

    为了让企业能更好用好云平台的数据安全能力,本文重点云平台数据备份冷备能力,以腾讯云为例,主要从以下两个维度介绍:同城数据冷备能解决企业什么问题,达到怎么样业务效果? 同城冷备份方案同城数据冷备方案主要依赖于云平台能力备份能力,对现有业务架构没有任何改造,方案架构如下:图片该方案核心要点说明:数据备份:云侧数据库mysql和redis在控制台设置数据备份参数,数据备份存储在COS,具备地域级别 指标详细说明能力具备同地域(不同可用区)数据备份能力,不具备不同地域的能力。 3.演练能力建设,增加平时运维成本以及自动化工具开发功能。

    8.4K113编辑于 2022-09-15
  • 来自专栏开元说说

    系列(九)——异地数据冷备建设

    2.3 数据库备份服务数据库备份服务拥有一套完整的数据备份和数据恢复解决方案,具备实时增量备份以及快速的数据恢复能力,同时具备异地能力。

    10.7K164编辑于 2022-09-19
  • 备知识总结:与备份区别、备技术、体系规划

    灾难恢复(Disaster Recovery)阶段定位:灾难发生后的系统重建与关系:现代系统集成恢复功能二、与备份的协同关系1. 功能互补性2. 典型故障应对案例1:数据库误删操作系统同步删除→需从备份恢复案例2:机房级火灾系统接管业务→备份用于数据追溯三、企业备体系规划策略1. 风险评估矩阵2. RTO/RPO指标选择金融行业:RPO<5分钟,RTO<30秒(中科热备同步复制技术)制造业:RPO<1小时,RTO<4小时(异步复制+本地备份)3. 医疗行业应用三甲医院HIS系统:中心部署中科热备CDP技术实现诊疗业务零中断切换3. 建议企业根据业务特性选择"备份++恢复"的三维防护策略,定期开展备演练,真正实现业务连续性保障。

    97810编辑于 2025-09-16
  • 来自专栏民工哥技术之路

    备知识总结:与备份区别、备技术、体系规划

    系统在企业中给与数据安全系数相当高的保障,但是系统倒是是什么,他们是什么意思?恐怕连正在使用备份的网络管理人员都不能解释。本文用最浅显的语言给大家解释备份到底是什么。 不可少 那么建设了备份系统,是否就不需要备份系统? 不能替换备份 系统会完整地把生产系统的任何变化复制到端去,包括不想让它复制的工作,比如不小心把计费系统内的用户信息表删除了,同时端的 用户信息表也会被完整地删除。 如果是同步,那端同时就删除了;如果是异步,那端在数据异步复制的间隔内就会被删除。这时就需要从备份系统 中取出最新备份,来恢复被错误删除的信息。 备份系统+异地系统 这是一个较为理想化的系统一体化解决方案,能够在很大程度上避免各种可能的错误。 恢复等级 ? 灾难恢复层次 ? 备技术层次 ? 1.1 磁盘阵列备技术 ?

    13.6K21发布于 2021-01-12
  • 来自专栏开元说说

    系列(四)——业务应用层建设

    综上所述,本文从云平台视角出发阐述应用层业务建设,主要分为方案设计考虑纬度、复杂度以及云上客户案例三个方面。 1.应用概述 1.1 应用部署 应用是否满足跨地域/可用区部署? 应用层调用链能接受跨区延时,一般以试点业务先观察,小步迭代方式逐步构建能力。 1)业务完全能接受跨区延时,不同的可用区应用部署规模(1:1),各承载50%的业务流量; 2)业务并不能完全接受跨区延时,为了做业务做了部分妥协,两个可用区业务部署的规模(5:1),主要业务承载在主可用区 切换强依赖于调度系统以及配置系统稳定性。这里稳定性主要包括系统能力和性能;遇到大规模故障,大量信息配置变更请求调度系统和配置系统要能扛住洪峰,是保障这个方案的根基。 2.应用复杂度 计算应用层,主要考虑以下两个方面: 哪些节点执行任务。 这里要区分清楚哪些节点执行核心业务,这里会引入不同的复杂度。

    4.4K72发布于 2021-09-04
  • 来自专栏开元说说

    系列(七)——混合云公网出口建设

    本文结合云平台公网能力,从网络平台角度来分析建设可行性。 入口流量通过F5或者api网关来承载流量,出口流量通过自建NAT集群来访问公网。 整体公网出口方案如下: image.png 2.1.1 云平台切换方案。 正常情况下,业务流量通过NAT访问公网,如上路绿色线条标识。 2.1.2 IDC切换方案 正常情况下,IDC业务流量通过NAT访问公网,如上路绿色线条标识。 5.方案实现较为复杂,不确定因素较多。 IDC公网出口方案 (推荐) 1.方案简单,更多依赖云平台能力 2.方案落地快捷。 3.人力成本低,不需要自建系统。

    4.4K124编辑于 2021-12-29
  • 来自专栏数通

    同城和异地的区别,你知道多少?

    多维度区别对比 特性维度 同城双活 异地双活 网络延迟 较低(通常≤5ms) 较高(通常≥50ms) 同步模式 同步复制为主(如MySQL半同步复制) 异步复制为主 数据一致性 强一致性或最终一致性 最终一致性 共享存储或数据库主从模式 单元化架构(按用户/业务分片) 成本 专线成本较高,但存储配置可能更简单 异步复制带宽成本相对较低,但架构复杂度和改造成本高 主要优势 高可用、数据零丢失(RPO=0)、故障切换迅速 城市级 2、等级要求:同城双活可应对机房级故障。若需防范城市级灾难(如地震、大规模停电),则需异地双活。 3、成本预算:同城双活专线成本较高,但架构相对简单。

    49710编辑于 2025-10-11
  • 来自专栏采云轩

    前端接口

    我细细细细分析。 原因就是接口挂了,拿不到数据了。那把数据储存起来就可以解决问题。 思考 存哪里? 第一时间反应浏览器本地存储,想起了四兄弟。 cookie localStorage sessionStorage indexDB 数据生命周期 服务器或者客户端都可以设置、有过期时间 一直存在 关闭页面就清空 一直存在 数据储存大小 4KB 5MB 5MB 动态,很大大于250MB 与服务器通信 每次都带在header中 不带 不带 不带 兼容性 都支持 都支持 都支持 IE不支持,其他主流都支持 考虑到需要存储的数据量,5MB 一定不够的,所以选择了 接口我们也是刚弄不久,有许多细节与不足,欢迎沟通交流。 接口本意是预防发生接口服务挂了的场景,我们不会很被动。原来是P0的故障,能被它降低为 P2、P3,甚至在某些场景下都不会有用户反馈。

    96110编辑于 2023-11-30
  • 来自专栏ICT售前新说

    知识知多少

    为什么要做? 你知道吗?自然灾害、设备故障、人为因素等都会造成业务中断。如今数字化时代,IT系统故障更会对公司业务造成难以估量的巨大经济损失。 1 数据统计 “2/5的公司在经历大灾难后再也不能恢复运作,另外1/3在2年内也接着倒闭。”---高德纳咨询公司 “93%的公司在遭受严重的数据丢失后5年内倒闭。” 体系介绍 1 数据中心 集团公司通过两地建立三个数据中心,通过双活、冷备等方式,实现两地三中心架构。 2 体系建设 系统类型 --- 策略 核心业务系统 --- 两地三活 关键平台系统 --- 同城双活 非关键系统 --- 异地冷备 3 技术方案 异地冷备 恢复能力 RTP≤1h RPO≤5min 演习要求 每年进行演练,所有核心业务与平台系统均要参演。 异地备恢复、同城双活切换、一键式自动化启停等恢复方式不断创新,要求演习规模逐年扩大和恢复效率逐年提升。 - End - ----

    1.9K20发布于 2021-04-30
  • 来自专栏开元说说

    系列(十)——数据热备能力建设【基础篇】

    异地明确数据热备能力,实时明确RPO指标接近于“零”。尤其是实时,对于RPO指标提升,为此需要企业投入更多的成本。 2)备实例,建议采用云平台的PAAS服务,更好的兼容DTS同步服务。2.2 平台热备方案2.2.1 数据库备方案目前数据库对于异地备份能力进行封装,来简化云上客户操作成本,提升RTO。 2.2.3 中间见实时备份方案ckafka云平台在数据同步已支持跨地域,但是对于ckafka版本有要求,为专业版本。 方案关键因素详细说明范围地域级别RPO/RTORPO几乎接近为零;RTO为小时级别,进行1:1业务部署,依赖于业务部署和数据恢复自动化能力。 3.演练能力建设,增加平时运维成本以及自动化工具开发功能。

    6.1K143编辑于 2022-09-26
  • 来自专栏ICT售前新说

    数据中心精讲(常见的建设模式)

    当前,市场上常见的模式可分为同城、异地、双活数据中心、两地三中心几种。 同城 同城是在同城或相近区域内(≤200KM)建立两个数据中心:一个为数据中心,负责日常生产运行;另一个为灾难备份中心,负责在灾难发生后的应用系统运行。 异地 异地主备中心之间的距离较远(>200KM)因此一般采用异步镜像,会有少量的数据丢失。异地灾难备份不仅可以防范火灾、建筑物破坏等可能遇到的风险隐患,还能够防范战争、地震、水灾等风险。 异地备中心是指在异地的城市建立一个备份的备中心,用于双中心的数据备份,当双中心出现自然灾害等原因而发生故障时,异地备中心可以用备份数据进行业务的恢复。 ,所以称为“双活”和“多活”;后者是生产数据中心投入运行,备数据中心处在不工作状态,只有当灾难发生时,生产数据中心瘫痪,备中心才启动。

    3.4K20发布于 2021-11-30
  • 来自专栏开元说说

    系列(一)—— 云上业务方案要如何选?

    本文从容概念,决策因素,典型案例和方案对比进行说明,希望方案的选择有所帮助。 1.概念 将这个词,分开来看“”和“”。 其次考虑当前方案能否满足切换和恢复目标。 3)扩展性,主要为后续业务平滑演进。 典型案例 虽然这里对“”概念进行扩展,一般指同地域以及跨地域粒度的;以云上客户案例同时结合腾讯云产品能力,分别对同城,异地备以及异地多活进行说明。 3.1 异地 异地的核心特征: 1)范围:地域粒度的。 2)流量分布:单地域承载100%业务流量。 3)数据存储:数据库以及存储均在异地做冷备,数据单向同步。 image.png 3.2 同城 同城根据数据写入方式分为单写或者双写;单写称为半双活,双写称为双活。 3.2.1 同城半双活(单写) 同城半双活核心特征: 1)范围:可用区粒度

    10.3K116发布于 2021-05-18
  • 来自专栏腾讯云中间件专家服务

    演练-故障切换

    设计需要进行故障切换的场景 设计过程当中需要考虑的故障切换的场景有很多,数据中心内部的高可用切换不在本次讨论范围之内,我们讨论的是恢复过程中的关键跨数据中心级的故障切换场景,从网络层到存储层都会涉及到 4.2 HA数据库服务模式 所谓 HA数据库服务模式是指通过操作系统HA软件结合数据库服务实现的架构,架构设计之初是为了实现各类应用服务的本地服务器高可用,但双活技术兴起之后,也常常被用来作为近距离 (百公里内范围)双活的数据库服务架构 。 5. 存储层的故障切换策略 5.1 存储网关服务模式 所谓存储网关模式,我们在《企业选型指南- 2 :企业的数据复制技术》当中介绍过, 就是在物理存储层之上增加一层网关技术,用以形成存储资源透明抽象层

    3.6K31发布于 2021-09-16
  • 来自专栏IfDataBig

    Hbase与备份

    一、前言 本文主要介绍 Hbase 常用的三种简单的备份方案,即CopyTable、Export/Import、Snapshot。 Clone a table from snapshot # 从现有的快照创建一张新表 hbase> clone_snapshot '快照名', '新表名' 5.

    2.2K40编辑于 2022-07-27
  • 来自专栏逸鹏说道

    与集群(1)

    我们大概了解了Orleans如何运用,当然上一篇的例子可以说是简单且无效的,因为用了Orleans不可能只写一个Hello World吧,Orleans是为分布式和云计算而生的框架,那么今天我们就简单说一说 、集群、与集群在Orleans中的运用。 是什么? 技术是系统的高可用性技术的一个组成部分,系统更加强调处理外界环境对系统的影响,特别是灾难性事件对整个IT节点的影响,提供节点级别的系统恢复功能。 和集群的关系? 个人认为是一种需求,目的,目标,而集群是一种技术手段,使用集群可以提供可用性和可缩放性,那么也解决了的问题,当然方式不仅限于集群镜像站点也能解决问题。

    2K40发布于 2018-04-09
领券