- 综合排序
- 最热优先
- 最新优先
- 来自专栏腾讯云混沌工程团队
【云顾问-混沌】混沌工程GameDay
1 什么是混沌GameDay? GameDay在混沌工程中可以理解为一次有计划的演练实践活动，可以持续一天，也可以持续几个小时，也可以持续几天，持续时间根据具体的目标而定。 混沌GameDay是一个有计划、受控、安全、可观测的活动，而不是“混乱”的活动。 混沌GameDay的最终目的是按照一定的规划，有序地对目标系统进行混沌演练，收集演练实验证据，以此来验证混沌工程稳态假说。 2 GameDay的准备 只要能对目标系统进行有计划的混沌演练的活动，并能收集到相关证据，都可以称为一次成功的混沌GameDay。您也可以按照如下步骤进行游戏的准备工作。 4 开展混沌GameDay活动 做好GameDay的准备之后，需要在GameDay开始前通知开展GameDay的人员，若有任何一方未就绪，GameDay应当取消或者延迟。
1.2K100编辑于 2024-03-15 - 来自专栏开发者
什么是GameDay？
“GameDay”是一个有组织的团队活动，旨在通过实践混沌工程，主动提高应用服务的可靠性。云顾问平台可以帮助您进行安全、可靠、高效的 GameDay 活动。 如何完成一次Gameday？ 1.准备： -使用云顾问绘制出云上应用服务的架构图 -使用“云巡检”插件扫描架构的风险并提前治理 -确定GameDay的目标、团队分工和时间 -在“混沌演练”中提前完成演练任务编排 2.执行： -实施故障注入 ，观察各项指标是否符合预期 -记录演练过程中发现的可用性问题 3.复盘： -记录GameDay演练结论，导出报告 -针对问题制定改进措施并跟进解决
16500编辑于 2025-06-09 - 来自专栏腾讯云大客户技术服务团队
【万字长文】腾讯云新能源汽车客户-混沌工程实战
各设计流派对比情况如下：图片2.2 腾讯云专家模式具体思路通过全面分析系统(明确目标系统、系统弱点探查)，梳理出最有价值的实验项，弥补时间窗口小的问题基于混沌工程原则设计混沌实验、Gameday设计，最小化混沌实验风险单次实验的报告复盘 3.4 GameDay3.4.1 GameDay设计GameDay关键人梳理Gameday包含两部分：实验处理人(Owners、Coordinators、Reporters、Observers)和故障处理人 3.4.3 GameDay执行GameDay执行，相对清晰。需关注的是：非故障处理角色，集中办公。可以是在同一个会议室，也可以是在线会议。实验方案不要按顺序执行，可采用随机挑选的模式执行。 客户场景做法：故障处理人员需单独留出时间参与gamenday仅被通知gameday时间段，混沌实验用例的执行顺序、注入目标、注入方法不会同步给他们如果注入故障后，系统的故障时间超过预定的故障预算，则由协调员直接执行终止实验的能力 ，应该尽量随机全场景XXX尽可能避免故障处理人员因提前获取实验方案，导致学习到的故障处理能力失真5.小结本文主要介绍和客户共建混沌工程的阶段，如何界定待实验系统、提炼业务指标、设计混沌实验、Gameday
4.1K707编辑于 2023-02-24 - 来自专栏腾讯云智能顾问
【云顾问-混沌演练】容灾演练Game Day最佳实践——moomoo
二、 Game-Day计划 2.1 什么是GameDay？ 混沌工程（Chaos Engineering）是通过主动向系统引入故障场景，并对系统在各种压力下暴露出的问题进行优化的一种稳定性保障手段。 2.2 如何组织一次GameDay？ 1. 确定演练目标和范围：首先确定演练实例范围、希望演练的故障场景，以及各场景下期望达到的效果； 2. GameDay活动围绕以下演练目标展开： 1. 原本需要腾讯云运维手工支持的复杂演练统筹工作交由客户在平台自助完成，节约了团队沟通及运维成本，极大提高了GameDay演练效率。 挑战3: 故障注入效果观测 在一次演练GameDay活动中，业务方往往需要实时关注系统所依赖的各个云产品监控指标情况，以评估故障演练效果，把控风险。
1.6K152编辑于 2024-03-13 - 来自专栏深度学习与python
都在聊混沌工程，它的落地实践你了解多少？| Q推荐
亚马逊可用性保障团队灾难大师杰西·罗宾斯，因其消防员的经验于 2004 年发明了 GameDay，邀请志愿者借助“实验”与待测系统进行“互动”，探索未知的系统风险，同时也训练了工程师团队的应急响应能力。 随着业界更多团队开展 GameDay，亟待一种新的实践模式实现 GameDay 高效实验、自动化和流程标准化。Netflix 发明的混沌猴子工具，以及后续提出的混沌工程正是源于这个思路。 落地混沌工程的难点和思路 混沌工程带来的价值，无疑是令人心动的。近年来，许多公司都尝试采用某种形式的混沌工程来提高现代架构的可靠性。然而，混沌工程的探索实践之路却并非一帆风顺。 早在 2004 年，亚马逊就创立了基于工程师团队的交互式和开放式的学习与训练的“GameDay”。在 2004 年到 2021 年整整 17 年间亚马逊云科技一直实践 GameDay 的玩法。 2010 年亚马逊云科技推出自研混沌工程产品 Amazon Gremlin，结合 GameDay 成为可用性保障实践内容。
60020发布于 2021-10-13 - 来自专栏超级架构师
【混沌工程】混沌工程原理
我们称之为混沌工程。 实践中的混乱 为了专门解决大规模分布式系统的不确定性，混沌工程可以被认为是促进实验以发现系统弱点。 改变现实世界的事件 混沌变量反映了现实世界的事件。通过潜在影响或估计频率对事件进行优先级排序。 混沌工程将自动化构建到系统中，以驱动编排和分析。 最小化爆炸半径 在生产中进行试验有可能导致不必要的客户痛苦。 虽然必须考虑一些短期的负面影响，但混沌工程师有责任和义务确保将实验的后果最小化并加以控制。 混沌工程是一种强大的实践，它已经改变了世界上一些最大规模运营中软件的设计和工程方式。 混沌原则为大规模快速创新提供信心，并为客户提供他们应得的高质量体验。 谢谢大家关注，转发，点赞和点在看。
1.1K20编辑于 2022-09-28 - 来自专栏超级架构师
【混沌工程】什么是混沌工程？
什么是混沌工程？ 混沌工程让您可以将您认为会发生的事情与系统中实际发生的事情进行比较。 您实际上是“故意破坏”以学习如何构建更具弹性的系统。 最终，混沌工程的目标是增强我们系统的稳定性和弹性。 混沌与可靠性工程技术作为构建可靠应用程序的基本学科正迅速获得关注。 在过去的几年里，许多组织——无论大小——都接受了混沌工程。 图片 混沌工程如何帮助测试发展？ 这在生产中是安全的，因为服务的其他实例正在处理客户需求；甚至没有人能说我们正在做混沌工程。 混沌工程是在当今复杂的现实中发现系统性问题的唯一方法，无论我们是否使用金丝雀部署。 混沌工程入门 我们首先设计了一个小型混沌实验，其规模远小于我们认为可能造成麻烦的规模。接下来，我们限制爆炸半径和真正的潜在危害，以便在进行混沌测试时保证系统和数据的安全。
1.2K30编辑于 2022-11-01 - 来自专栏超级架构师
【混沌工程】2022 混沌工程状态
我们从首份混沌工程状态报告中看到了同样的相似之处：表现最好的混沌工程团队拥有四个 9 的可用性，MTTR 不到一小时。 Chaos Engineering today 混沌工程正变得越来越流行和改进：60% 的受访者表示他们已经运行过混沌工程攻击。 使用混沌工程后，你体验到了什么好处？ 采用/扩展混沌工程的最大障碍是什么？ 我们相信，混沌实验将变得更有针对性和自动化，同时也变得更加普遍和频繁。 我们对混沌工程的未来及其在使系统更可靠方面的作用感到兴奋。
1.1K20编辑于 2022-11-01 - 来自专栏开发者
「腾讯云顾问GameDay实践」如何有效进行同城双活容灾验证
GameDay目标：验证业务同城双活容灾架构的有效性 Step 1.使用云顾问绘制业务云上架构图（图1） Step 2.使用云顾问-混沌演练实施故障注入（图2） 场景1：CLB健康检查可用性验证 结论：
27310编辑于 2025-06-09 - 来自专栏超级架构师
【混沌工程】故意破坏和混沌工程
在这一集中，Jason 与加拿大皇家银行的开发者宣传总监 Aaron Clark 聊天。Aaron 分享了最初在 RBC 担任开发人员并从事早期云开发工作，然后过渡到他作为开发人员倡导者的角色的感觉。Jason 和 Aaron 讨论了在组织内应用开源原则或“内部资源”的价值。他们的时间以继续教育和如何继续学习的讨论结束。
77230编辑于 2022-11-01 - 来自专栏腾讯云混沌工程团队
【云顾问-混沌】混沌工程理念：起源
混沌工程的诞生 从客观来看，类似的问题我们有的可以提前预知到，有的确实完全无法避免（比如自然灾害导致机房不可用等因素）。 在这方面，Netflix首先提出了Chaos Monkey（在系统中捣乱的”混沌猴子“）来对目标系统进行随机的宕机测试，评估系统在可用性，容错性等方面的韧性边界，“混沌工程”由此诞生。 如何开展混沌工程实验 腾讯云混沌演练平台（CFG），为您提供安全、易用的的故障注入服务，助您打造稳固如磐石的云架构系统。 ，轻松上手构建一个复杂场景的故障演练任务； 更值得一提的是，腾讯云混沌演练平台还拥有行业演练经验库。 马上免费试用腾讯云混沌演练平台，体验一场真实的混沌工程实验吧！ 点击链接，立即了解更多关于腾讯云混沌演练平台的信息，一起开启稳定性建设的新篇章！
94741编辑于 2024-03-15 - 来自专栏架构之美
混沌工程
混沌工程简介 混沌工程师一门新兴的技术学科，它的初衷是通过实验性的方法，让人们建立复杂分布式系统能够在生产中抵御事件能力的信息。 混沌工程，重在实验，不同于测试。混沌工程，是发现新信息的实践过程；测试，只能让我们通过最终呈现得知这个结果是否我们预期的，要么正确，要么错误。 如果你准备开始使用混沌工程，最起码要保证你的系统已知的问题都已被解决了。混沌工程，是用来暴露生产系统中那些未知的、脆弱的环节。同时我们还要搭配一套监控系统来观察和判断系统当下的各项指标状态。 我们从混沌工程试验的基本设计方法到高级原则来深入了解它。在真正实施混沌工程的大规模系统上，遵循的原则越全面，你面对系统弹性的信心就越足。 总结 以上内容主要是根据电子工业出版社的《混沌工程 Netflix 系统稳定性之道》一书进行整理，希望大家可以通过阅读此文对“混沌工程”的基本理念和使用原则有一个初步的认知。
1.8K40发布于 2020-01-15 - 来自专栏超级架构师
【混沌工程】Chaos Mesh：Kubernetes 的混沌工程平台
Kubernetes 的混沌工程平台。 Chaos Mesh 是云原生计算基金会 (CNCF) 托管的项目。它是一个云原生混沌工程平台，可在 Kubernetes 环境中编排混沌。 在当前阶段，它具有以下组件： Chaos Operator：混沌编排的核心组件。完全开源。 Chaos Dashboard：用于管理、设计、监控混沌实验的 Web UI。 请参阅以下演示视频，快速了解 Chaos Mesh： Chaos Operator Chaos Operator 以可管理的方式将混沌注入应用程序和 Kubernetes 基础设施，为混沌实验和自动编排提供简单的自定义定义 Chaos Operator 使用 CustomResourceDefinition (CRD) 来定义混沌对象。 由于涉及到云原生部署服务，字节跳动集成了Chaos Mesh作为底层故障注入引擎，是对字节跳动混沌工程平台的重要补充。 To be added.
2.1K20编辑于 2022-09-28 - 来自专栏腾讯云混沌工程团队
【云顾问-混沌】 跨 AZ 容灾混沌演练
进行跨 AZ（可用区）容灾和混沌演练变得尤为重要。 腾讯云基于该背景，推出了混沌演练平台，助力用户进行云上稳定性治理，并结合行业经验，形成了跨 AZ 的容灾演练模版，用户可以基于该模版一键创建混沌演练或在此模版基础上添加新的故障演练场景，灵活便捷！ 提高应急响应能力：通过定期进行跨 AZ 容灾和混沌演练，提高企业和组织的应急响应能力，确保在发生问题时能够迅速采取恢复措施。 如何快速进行跨 AZ 容灾混沌演练？ 借助于腾讯云混沌演练平台，可方便快捷地进行跨 AZ 容灾混沌演练时，可以遵循以下步骤： 前往腾讯云混沌演练平台【概览】选择「跨可用区容灾演练」行业经验模版。 点击之后可选择去使用，可以直接创建对应的混沌演练任务。 2. 选择对应的云上实例资源或添加其他故障场景，即可开始跨可用区容灾混沌演练。
78210编辑于 2024-03-15 - 来自专栏老张的求知思考世界
混沌工程-初识
公司新成立了一个稳定性团队，20年的重要目标之一就是开展混沌工程。为了后续更好的开展工作，记录关于“混沌工程”相关的知识以及工程实践。 Monkey-Ops：Go语言实现，可在OpenShift V3.X上部署并在其中生成混沌工程实验。可随机停止OpenShift组件。 ChaosBlade：阿里开源的一款遵循混沌工程原理和混沌实验模型的实验注入工具，是内部MonkeyKing对外开源的项目，结合了阿里各业务的最佳创意和实践。 我们需要在异常触发之前，尽可能地去筛选出会导致出现有异常问题的、容易造成故障的、系统中明显裂痕的环节，这也是混沌工程所肩负的意义。 2、混沌工程解决什么问题？ 生产环境下，分布式系统在面对失控条件时是否具备较强的“可观测性”和故障恢复能力。 3、开展混沌工程要考虑的维度有哪些？
1K20发布于 2020-02-17 - 来自专栏软件测试架构师俱乐部
混沌工程-初识
公司新成立了一个稳定性团队，20年的重要目标之一就是开展混沌工程。为了后续更好的开展工作，记录关于“混沌工程”相关的知识以及工程实践。 Monkey-Ops：Go语言实现，可在OpenShift V3.X上部署并在其中生成混沌工程实验。可随机停止OpenShift组件。 ChaosBlade：阿里开源的一款遵循混沌工程原理和混沌实验模型的实验注入工具，是内部MonkeyKing对外开源的项目，结合了阿里各业务的最佳创意和实践。 我们需要在异常触发之前，尽可能地去筛选出会导致出现有异常问题的、容易造成故障的、系统中明显裂痕的环节，这也是混沌工程所肩负的意义。 2、混沌工程解决什么问题？ 生产环境下，分布式系统在面对失控条件时是否具备较强的“可观测性”和故障恢复能力。 3、开展混沌工程要考虑的维度有哪些？
1.1K20发布于 2020-02-19 - 来自专栏Python自动化测试
混沌工程实践
所以针对每个系统而言都是存在稳定状态和不稳定状态，很说明确的说混沌与不确定性是一回事。 所以首先需要明确的是混沌工程的思想它是科学实验的方法论，所有的一切都是在系统实验的基础上来寻求系统的平衡性。 所以在公司如果需要开展混沌工程，需要遵守混沌工程的五大原则，这些原则具体为： 首先要定义系统的边界 引入现实世界的真实案例事件。比如数据库超时，内存泄露，网络故障等 在生产环境中运行。 混沌实验毕竟是对系统造成冲击的，而且是在生产环境中进行，所以在实际开展的过程中，要选择影响范围小的，不能因为开展实验而导致系统出现故障，从而给系统带来一些破坏的行为。 混沌实验最好是持续的自动化。 混沌实验有非常成熟的工具，比如阿里巴巴开源的ChaosBlade，在前面的文章中详细地介绍了混沌实验模拟网络层故障，系统CPU，内存，OOM等案例，这里就不再重复。
76820编辑于 2022-12-03 - 来自专栏云计算与大数据
ChaosBlade：混沌工程
1 混沌实验模型 ChaosBlade 项目覆盖基础资源、应用服务、容器服务等混沌实验场景。 此模型具有以下的意义： 更精准的描述混沌实验场景； 更好的理解混沌实验注入； 方便沉淀现有的实验场景； 依据模型发掘更多的场景； 混沌实验工具更加规范、简洁。 ； 上层的领域场景可以复用遵循混沌实验模型定义的场景； 通过混沌实验模型声明的场景描述可以很好的接入到 ChaosBlade 中； 遵循实验模型可以很方便的构建上层混沌实验平台。 ，无需新增场景时再做平台开发，使混沌平台更加专注于混沌工程其他部分。 混沌工程平台。
1.6K30发布于 2021-08-26 - 来自专栏腾讯云混沌工程团队
【云顾问-混沌】服务宕机灾难预防手段：混沌工程
答案是有的——混沌工程。 为何需要进行宕机混沌演练？ 对于互联网行业从业者而言，服务中断无疑并不陌生。其影响极为重大且广泛，涉及日常生产生活的诸多方面。 腾讯云混沌演练平台（CFG），提供对腾讯云CVM进行开关机混沌演练，可模拟服务器宕机故障场景。 而主动地引入可控的服务器宕机故障，进行混沌演练，便是验证服务容灾恢复能力的高效方案。 故障演习原理 执行故障：调用腾讯云CVM开放API，发出开关机请求。 快速开始 可前往腾讯云混沌演练平台，选择CVM 关机动作进行CVM主机宕机演习。 CVM关机
60010编辑于 2024-03-15 - 来自专栏超级架构师
【混沌工程】什么是混沌工程？ 介绍、定义及更多
混沌工程和混沌实验带来了可控的混沌，因此我们可以摆脱这些类型的事件。 什么是混沌工程？ 混沌工程是故意将故障注入系统以衡量弹性的科学。 由于可能会影响广泛的基础设施，混沌工程的用户和从业者几乎可以是支持应用程序/基础设施堆栈的任何人。 谁使用混沌工程？ 由于混沌工程涉及广泛的技术和决策，混沌工程实验可能有多个利益相关者。 这正是混沌工程正在解决的问题。混沌工程实验的结果随后被用于创建一个更具弹性的系统。 混沌工程原理 《混沌工程原理》是一篇出色的宣言，描述了混沌工程的主要目标和原则。 在实施混沌工程实验时，实施混沌工程的原则会导致一些设计注意事项和最佳实践。 混沌工程最佳实践 在实施混沌工程或任何测试时，有三个支柱。 今天，不乏工具和平台来帮助您实现混沌工程目标。 混沌工程工具 围绕混沌工程有很多进步和工具。很棒的资源列表是 Awesome Chaos Engineering 列表。
5K21编辑于 2022-09-26
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号