在VUCA的互联网环境下,需求变更越来越快,交付周期却越来越短,如何量化测试工作?如何提高效能? 我们来看看来自京东的张乐大神的解答 ? 现有的研发效能度量方式不足 ? 研发效能度量的正确姿势 JD对软件研发效能的度量,以下两个基本原则为主: 1. 聚焦在全局指标而不是局部指标 我们要促进跨越职能和功能,在团队内、团队间彼此高效协作。 2. 研发效能度量指标三个维度 交付效率、交付质量和交付能力,这些指标的提升需要组织进行管理、技术、协作等多方面的系统性改进。 ?
新挑战:AI Coding范式下编码速度提升x10,逻辑类漏洞复杂度增加,传统挖掘方式难以适配。 数据来源:原文“行业现状:为什么需要 AI 漏洞猎人?” 产品效果稳定” 量化AI漏洞猎人的应用成效 关键ROI指标(数据来源:原文“落地成效:评估工程与挖掘成果”): 已知漏洞召回率>90%(基于50个靶场测试); 时间成本<15分钟(10万行代码内
数据表明:物理隔离不等于效能必然衰减,关键在体系化破局。下文将拆解七个经实战验证的效能杠杆,覆盖工具、流程、人三大维度。 K8s)实现秒级构建 · 浏览器云平台(如BrowserStack)覆盖98%终端矩阵 · 流量回放技术重构生产级测试场景 某金融科技团队实践:环境准备时间从6.5小时压缩至9分钟,跨时区协同效率提升 :回归测试设计效率提升45%,关键路径覆盖率提升至92% 三、异步协作范式:打破时空枷锁 创新工作流设计: 核心价值:减少73%非必要同步会议,北美-亚洲团队实现24小时接力测试 四、精准自动化策略 3.8,资源消耗降低60% 五、质量导航仪:实时效能度量体系 必建四大仪表盘: 流式效能看板(需求流转效率/阻塞时长) 缺陷热力图(模块/设备/地域维度) 环境健康指数(可用率/构建成功率 七个关键点共同构建了可量化、自适应、持续反馈的远程测试引擎。2026年测试团队的竞争力,正取决于将地理隔阂转化为全域协同优势的能力——这不是应急方案,而是质量工程进化的必然方向。
7.查询 将所有数据转移到 Clickhouse 的主要问题之一是能否从 Google 在导出中提供的原始数据复制 Google Analytics 提供的指标。
7.查询 将所有数据转移到 Clickhouse 的主要问题之一是能否从 Google 在导出中提供的原始数据复制 Google Analytics 提供的指标。
7.查询 将所有数据转移到 Clickhouse 的主要问题之一是能否从 Google 在导出中提供的原始数据复制 Google Analytics 提供的指标。
发起公司级效能度量委员会并制定度量指标体系;而且在技术社区持续活跃,在各类综合性/专业性技术大会中担任出品人等角色,对互联网大厂的研发效能提升思路和做法有一定的理解,因此,把这些经验总结起来,形成了一个具有增强回路效果的研发效能提升体系 3 效能度量 目标:在正确的方向上开展研发效能度量和数据洞察,指导和驱动效能改进和提升。 价值主张:数据驱动+实验思维。 我认为,效能度量的目标就是让效能可量化、可分析、可提升,通过数据驱动的方式更加理性地评估和改善效能,而不要总是凭直觉感性地说“我觉得……”。 促进高效能的组织、结构和个人能力提升的模型是怎样的? 研发效能如何进行规模化扩展? 研发效能的支撑工具如何选择和落地? 各个行业研发效能提升的综合案例有哪些? 本文摘自《软件研发效能提升实践》一书,欢迎阅读本书了解更多相关内容。
量化应用效果与客户价值 聚焦ROI关键指标,应用效果如下: 系统稳定性:承诺99.9% SLA,依托数据中心级移动机房、自研硬件、40Gbps专用互联网线保障测试流程稳定高效(数据来源:Tencent 方案在两类场景落地: 开放世界游戏(复杂系统、高自由度、体验导向):性能测试聚焦沙盒玩法渲染分析,性能监控覆盖全平台崩溃异常,功能测试用自定义标签复现问题,兼容测试覆盖高低端机型; 休闲游戏(下沉市场、轻量化 undefined实践助力客户降低运维成本、提升多端体验一致性。
俗话说,“有钱能使鬼推磨”,这话虽然说有点夸张,不过已经是把金钱的力量描绘得非常清楚了。绝大部分人都是趋利的,所以在我看来,“利”是驱动人们协作、交互、杀伐的最基本动机,也是驱动世界运动的核心动力。只不过广义的“利”这个东西不仅仅是金钱这么简单——有的人可能被自己所信服的大义所打动,有的人可能为了自己追求的某种癖好而耗尽毕生心血,很显然刚刚说的这两样东西都不是简单用货币能衡量清楚的。为了讨论方便一些,我们现在还是指说能够用货币衡量的,商业环境下的,常态的买卖行为好了。
研发效能提升是最近比较热门的一个话题,本人根据这几年的工作心得,做了一些思考总结,由于个人深度有限,暂且抛转引入。 三要素 任何生产力的提升都离不开这三个因素:人、流程和工具,少了其中任何一个因素都无法实现。 人,即思想,也就是古人说的“道”,道不同不相为谋,是制高点,也是高层建筑的基石。 研发效能的提升,也就是要提高投入产出比,既要增加产出,也要减少消耗。 工具,即道具、器械,对应“器”。选对工具很重要,趁手的工具往往能起到事半功倍的效果。 按照敏捷宣言,个体和交互胜过流程和工具,人的因素是最重要的,但人的思想在短期内又无法提升,需要长期不断投入。 ,好的工具必须是符合企业文化,并能促进流程的自我改良的 工具和度量 度量是研发活动的镜子,只有完善的度量体系,才能清晰知道哪里存在弱项,哪里是我们改进的重点 缺少度量,研发过程必然不可见,更谈不上如何提升研发效能
多场景量化应用效果与客户价值 游戏NPC:动态交互重塑沉浸感 巨人网络《太空杀》:接入腾讯混元Turbo S大模型,2亿注册玩家与超700万智能NPC在线竞技,上线首月AI参与近90万场对局,生成超700 万个独立逻辑链条智能体,动态博弈提升玩家沉浸感,降低人工内容成本(来源:腾讯云X巨人网络游戏NPC案例)。 六度人和CRM:通过TCADP接入DeepSeek,联网搜索实时捕捉企业动态,商机助手多维度分析潜在客户,客户意向转化率提升30%(来源:腾讯云X六度人和智能客服案例)。 天润融通客服:全线产品接入DeepSeek,客服机器人独立接待率提升15%-20%,辅助排障场景精准定位故障(来源:腾讯云X天润融通智能客服案例)。 通用效率提升:创作与工具双优化 Holopix AI美术创作:接入DeepSeek优化“文生图-提示词”“图生图-智能推词”,工作效率提升60%-70%,腾讯云CFS Turbo+TKE推理集群保障生图效率
某中心的Jetson AGX Thor边缘计算平台,自2025年8月发布以来,通过持续的软件优化,其生成式AI性能已实现了7倍的增长。 持续的软件优化随着最新的vLLM容器发布,与8月底首发日的性能相比,Jetson Thor在相同模型和量化配置下,性能提升了高达3.5倍。 例如,在Llama 3.3 70B模型上使用推测解码,可获得88.62输出令牌/秒,相比首发性能实现了7倍加速。 如果量化后的模型在任务上的精度满足要求,则坚持使用。若任务更复杂,发现W4A16精度不足,则切换到FP8。推测解码:采用草稿-验证方法提升推理选定量化格式后,下一个重要的性能杠杆是推测解码。 在Llama 3.3 70B(W4A16)上的基准测试显示,该功能实现了2.5倍的性能提升。结合量化与推测解码将这两种技术结合使用能产生更佳的效果。可以使用内置了优秀EAGLE-3支持的vLLM。
作者:徐钰菡 | 效能改进 一、背景 在互联网行业,大部分研发团队都会通过建设中台(有些公司叫平台),来提高系统的可复用性,降低重复功能的研发成本。 我们根据杨三角理论,认定协同中台的改进工作要从「提升组织能力」的层面出发,大致可以分为「技术框架、工具链支持、主观能动性」三个方面。 图4. 优点:业务子域团队无须再依赖中台,能够自闭环地工作,缩短了需求的等待周期,提升了业务项目的交付效率。同时,中台研发人员精力得以释放,不再受困于业务项目,可以投入更多资源完善中台能力。 需求交付周期缩短了 10% 图7. 如果读者想知道我们在共建(v2)阶段具体做了哪些改进来提升中台效能的,那就烦请坐等下回分解吧。如读者有中台协同相关的话题,欢迎在底部留言,我们做进一步交流。
下面介绍腾讯会议在研发效能项目中的实践经验,希望对同样走在研发效能提升道路上的你有所借鉴与帮助。 生于云、长于云的腾讯会议,从规范和组件的建设开始,开启了研发效能提升之路。 2 腾讯会议研发效能改进历程 从 2020 年下半年开始,腾讯会议启动了基础建设与调研。 2021 年,腾讯 CSIG 技术委员 会研发效能提升组成立,腾讯会议作为第一批试点业务团队,正式启动了研发效能专项,目标是通过半年的专项共建提升团队的整体研发效能,下图是研发效能建设规划。 随着腾讯会议规模的不断壮大,我们希望在研发效能方面做得更好,为业务的快速迭代提供支撑,也为更多需要进行研发效能提升的团队带来借鉴与参考。 以上内容节选自《软件研发效能权威指南》,这本书堪称研发效能领域的“百科全书”,涵盖了效能提升全生命周期的方方面面。
写在前面 上一篇如何衡量工具平台的效能价值? 推导出了一种度量模型,通过具体的数据指标来衡量效能价值,让内部工具/平台的价值也能看得见、说得清 那么,对于正在做或者将要做的工具平台,如何进一步提升其效能价值呢? 一.效能价值有哪些影响因素? 首先,工具的关键目标是解决实际问题: 工具总是为解决问题而生的 选定目标问题之后,接着通过工具化、平台化等自动/半自动的手段来尝试解决,并通过效率和体验两方面的提升体现出解决方案的效能价值: 效能价值 体验因子 进一步细化: 工具效率 = 问题规模 / 操作时间 工具效率 = (不用该工具解决所需的)时间成本 / (用该工具解决所需的)时间成本 工具体验 = 易用程度 * 稳定程度 因此,工具的效能价值取决于 4 个因素: 问题规模 操作时间 易用性 稳定性 提升工具效能就是想办法增大分子、减小分母,即提升问题规模、易用性、稳定性,降低操作时间 二.如何提升问题规模?
在团队协作专题,腾讯研发效能资深专家茹炳晟发表了题为《研发效能提升最佳实践的探索》的主题演讲。 ? 由此可见,效率的提升既可以由技术来驱动,也可以由流程来驱动。 ? 看完了上面的例子,我想你已经对研发效能提升有了一个非常感性的认识了。接下来,我们来看一下研发效能的本质。 这个节流就是研发效能的提升,同样的资源,同样的时间来获得更多的产出。 基于流程优化,打破各个环节看不见的墙,去除不必要的等待,提升价值流动速度正是研发效能试图解决的一大类问题。 ? 这页Slides是从软件开发、测试和发布的视角罗列了各个阶段研发效能提升需要关注的问题。 从上面的描述我们可以看到,研发效能的提升涉及的面很广,既有基于技术的,也有基于流程的,那么在实际工程实践中,我们又该如何来落地研发效能提升呢?
一把手坚定支持并亲自推进,需求清晰明确且已文档化,合作各方已拉通目标且达成一致,三周后的今天,一把手换人了且目标需要修正,需求的内容和优先级需要推翻重来,新加入了三个合作方各有各的诉求,管理复杂度迅速提升 而应对变化最强有力的手段之一便是提高团队效能。 ” 这里的高度参与和有积极性的团队便是高效能团队的特征,这几个关键因素反映到团队管理上,使命感是目标,自主工作是动力,精通所在的领域是能力,所以,要发挥高效能的状态,团队必须有目标,有动力,具备实现目标的能力 总结一下:提升效能是敏捷团队为了应对变化带来的挑战而采取的有效手段,为了保证团队发挥高效能,团队必须具有清晰一致透明的目标,必须挖掘动力通过自组织的方式进行管理,必须建设多样化的能力完成任务。 团队目标回答的是“要不要”,团队动力回答的是“想不想”,团队能力回答的是“能不能”,只有三个因素具备,团队才具备了高效能,而高效能回答的是团队做的“快不快”的问题。
营销侧: 部署AI智播(数字人)、AI智剪及智能分派系统,结合线索营销中枢与实战销售助手(7x24小时全知视角与场景感知提示)。 实现核心业务指标的量化跃升 通过部署一体化平台与场景智能体,车企在研发、销售及数据工程等维度的核心业务指标获得显著提升(核心ROI指标): 研发与决策敏捷性重构: 产品分析效率提升 90%+(常规业务分析周期由 7天缩短至30分钟),实现分钟级市场感知。 线索精准分派使得接通率提升 25%+,邀约到店率提升 50%+。 销售助手辅助下,实时任务处理效率提升 60%+,线索流失率降低 14%+,最终销售成单效率提升 20%+。 引入腾讯流湖一体引擎「Setats」后,在同一份存储上实现流/批/增量统一计算,取得以下量化成效: 运维成本大幅削减: 总体TCO降低 30%+。
2021 年,腾讯 CSIG 技术委员会成立了研发效能提升组,基于腾讯云的技术标准化,以 CODING 为底座,建设了统一的 DevOps 平台,集成从需求、代码、制品到云原生部署研发运维全生命周期的工具能力 下面介绍腾讯会议在研效项目中的实践经验,希望对同样走在研发效能提升道路上的你有所借鉴与帮助。 2021 年,腾讯 CSIG 技术委员会研发效能提升组成立,腾讯会议作为第一批试点业务团队,正式启动了研效专项,目标是通过半年的专项共建提升团队的整体研发效能。 腾讯高级管理顾问乔梁说:“一致性是效能提升的必经之路”。没有标准,散乱的微服务就如同一盘散沙,无法形成合力。这也是腾讯会议要从标准化建设入手建设研效体系的原因。 腾讯会议进行了统一日志建设,使用 CODING 平台可观测模块的日志功能,并基于 CLS 平台主动采集,对业务代码做到零侵入;制定相应的度量指标,每天定时统计各个服务前一天的日志量,让每个研发都能掌握服务日志的量化数据
发起公司级效能度量委员会并制定度量指标体系;而且在技术社区持续活跃,在各类综合性/专业性技术大会中担任出品人等角色,对互联网大厂的研发效能提升思路和做法有一定的理解,因此,把这些经验总结起来,形成了一个具有增强回路效果的研发效能提升体系 因此,效能实践、效能平台和效能度量形成了一个彼此增强、迭代优化的回路,有效利用好这个增强回路可以帮助企业持续提升研发效能。 3 效能度量 目标:在正确的方向上开展研发效能度量和数据洞察,指导和驱动效能改进和提升。 价值主张:数据驱动+实验思维。 我认为,效能度量的目标就是让效能可量化、可分析、可提升,通过数据驱动的方式更加理性地评估和改善效能,而不要总是凭直觉感性地说“我觉得……”。 促进高效能的组织、结构和个人能力提升的模型是怎样的? 研发效能如何进行规模化扩展? 研发效能的支撑工具如何选择和落地? 各个行业研发效能提升的综合案例有哪些?