自动化测试的 8 个最佳实践

然而，自动化测试并非万金油，想要真正发挥其价值，关键在于遵循正确的实践路径。选对工具、合理规划、确保测试的稳定性，才是自动化测试走向成功的独门秘籍。 接下来，我将分享一些自动化测试的最佳实践，帮助大家避开那些坑，提升测试覆盖率和执行效率。 清晰的自动化计划 成功的自动化测试，始于一份清晰且合理的计划。 正所谓各人自扫门前雪，让每个测试用例都成为独立个体，才能真正实现自动化测试的高效与稳定。 并行测试 并行测试是提升测试效率的加速器。 通过制定科学合理的策略、选择合适的工具，并遵循前述的最佳实践，团队能够轻松实现自动化测试的长期效益。 只要我们能够在实践中不断谨慎规划、持续优化，自动化测试就能从一个高效工具发展成为开发流程中不可或缺的强大助力。它不仅能提高开发和测试的效率，更能确保产品质量的稳定性。

K8S 在有赞 PaaS 测试环境中的实践

，从18年7月份开始，我们决定把测试环境从虚拟机迁移到 K8S 上，做这个决定主要出于以下几个方面考虑。 2.2.3 顺势而为 云计算飞速发展，Docker 技术突飞猛进，kubernetes 大势所趋，各大公司都在玩 K8S，PaaS 测试人员需要紧跟时代的步伐。 同时 Service Mesh 技术正在悄然兴起，PaaS 的服务化产品后期也会在 K8S 中测试...... 这部分我们讲解了基本而必要的操作步骤将一个应用部署到 Kubernetes 集群中，并且可以通过外部网络访问 K8S 集群内部的应用，下面分享一些我们在测试过程中为了满足特定需求而使用的一些高级用法。 五、结束语 到目前为止，有赞 PaaS 所有产品的集成测试环境已经从 VM 迁移到了 K8S，留了几台 VM 做备用，不仅提高了集成速度，而且降低了公司成本。

敏捷测试价值观、方法和实践读书笔记（8）

API测试 API基础介绍 1Web Service Web Service通常使安全用XML(可扩展标记语言),这意味着其比json更 Web Service是 WebAPI的子集，其仅包含 SOAP 在项目中如何进行API测试 基于 API 的应用程序在这几年流行的原因如下。 API 测试类型 ·功能 ·性能 ·安全 两个阶段 ·工具选型 ·收集需求和识别约束 ·评估可用工具 ·PoC ·具体实施 ·启动准备 ·正式启动 ·CICD 后面内容，我认为使用价值不大，忽略

「最佳实践」腾讯云 ES 8 向量化语义混合检索测试指南

环境配置 客户端环境 ● 版本 CVM 镜像：CentOS 7.9 64位 | img-l8og963d | 20GiB Linux环境：Centos 7.9 Python：3.9.12 Elasticsearch 集群创建完成之后，为了方便测试，需要移步 ES实例 > 访问快照 > 可视化访问控制 > 公网访问策略，将白名单修改为 0.0.0.0/0 注意：此操作是为了方便测试，生产环境还需谨慎操作。 3. date_str, "%Y 年 %m 月").isoformat() def read_data(file_path): with open(file_path, 'r', encoding='utf-8' 创建界面 st.set_page_config(layout="wide") st.markdown("

腾讯云 Elaticsearch 8 ● ES 也支持在在混合检索场景使用聚合查询 8.

GraphQL测试实践

我们很熟悉以REST实现的API，可以用任何能够发出http 请求的库或者工具来测试REST API。 回到正题，刚才主要还是停留在REST api与GraphQL一些基本的区别，那么怎么手动测试。 我们可以利用代码来实现，但对于项目中所有角色，尤其是一些没有代码经验的人，让他们去看代码实现是非常痛苦的，自动化测试本质是能够帮我们快速回归，验证完成功能是否受到影响，并且你的测试代码或工具能够让每个角色轻松理解并能够快速简单使用 ---- 利用测试脚本实现GraphQL自动化api测试 上面主要介绍如何手动测试GraphQL，当然我们也可以利用代码来实现GraphQL 测试。 传统上我们测试RESTful时，大部分人可能选择的mocha chai supertest 这个库作为测试框架 来编写API测试，通过上面的文章，我们了解到GraphQL 请求的底层依然还是http request

精准测试实践

前段时间接到了一个输入法开关下发的功能，通过精准测试的理念，在测试效率和测试覆盖度上提升较大，在这里分享一下测试过程： ? 3、确定测试全集： 通过了解实现，确定测试全集为： 1、 全部策略正确性。 2、 所有单元策略正确性。‍ 5、手动设计用例： 经过统计，所有204条单元策略中，有8条策略线上流量未覆盖到。覆盖度为96.1% 有了未命中的策略id，可以针对每条单元策略的命中条件，设计相应的接口用例覆盖单元策略‍。 6、验证覆盖度： 设计完对应8条策略的case后，执行case，确认流量未覆盖的8条单元策略全部覆盖完毕，至此，保证单元策略覆盖度达到100%，此项任务测试完毕。‍ 总结了一下，本次结合精准测试理念，对项目的提升如下： ? 整体开展精准测试的大体过程如下： ? 欢迎添加我们的搜狗测试微信号，与我们一起聊聊测试。 ?

Cucumber测试实践

测试实践都会提供一些解决思路，并且还远不仅限于此。 然而并不是所有的行为都能够称之为行为，其中需要意识到行为和实现是有区别的，我们希望记录的是具体的用户行为而不是这个行为中的每一步实践。 二、Cucumber测试实践 1、并不是BDD 根据维基百科，BDD是一种对于TDD在敏捷软件开发中的改进尝试，主要目的在用自然语言让DEV、QA、BA、PO对于程序如何运行形成一种共同理解。 然而，我们的目的是为了将我们在测试过程中的所有行为、断言利用程序记录下来，所以Cucumber是作为一种脚本工具来完成测试实践。在这个场景下我们测试的是一个已经开发完成的代码，这不是一种BDD。 1、Cucumber与E2E结合不是好的实践 在github上搜索Cucumber相关的开源项目，95%以上的都是将Cucumber和E2E测试工具相结合使用。

前端测试策略升级——现代测试实践

/test/setup.js'], globals: true, coverage: { provider: 'v8', reporter functions: 80, lines: 80, statements: 80 } } }; } } 现代测试实践 {js,ts}'], // 覆盖率 coverage: { provider: 'v8', reporter: ['text', 'json', 'html'] ; expect(screen.getByRole('button')).toHaveClass('btn-outline'); }); }); React Testing Library实践 > { expect(screen.getByText('Jane Doe')).toBeInTheDocument(); }); }); }); Playwright E2E测试实践

测试框架实践--TestFixture

一个测试类，通常有多个测试方法，有时候一个或多个测试方法都需要某些共用的”数据“， 比如说都要访问某个数据库的某张表，比如说都需要起浏览器，都需要调用post方法等。 由此可见，Test Fixture用在测试方法前，或者测试方法后，主要功能是提供一些测试需要用的装置，这些装置可以是数据，可以是环境配置也可以是一个运行前状态。 2.这样第一层次的并发，是基于测试类的，然后针对每一个测试类，我再进行并发。 历史文章： Python数据驱动实践(一)–ddt实现数据驱动 Python数据驱动实践(二)–教你用Python实现数据驱动 Python数据驱动实践(三)–动态添加测试用例 Python测试框架实现 (四)–动态挑选测试用例 Python测试框架实现(五)–多线程

测试框架实践--TestFixture

一个测试类，通常有多个测试方法，有时候一个或多个测试方法都需要某些共用的”数据“， 比如说都要访问某个数据库的某张表，比如说都需要起浏览器，都需要调用post方法等。 __call__(name) 8 except: 9 # traceback.print_exc() 10 cases_run_fail.append(name) __call__(cls) 7 8 if value: 9 func. func_pack = case[1] 7 8 #实现setUPClass 9 #到这一层只是类并发，真正的测试函数还没有并发。 def before_class(cls): 5 print("haha") 6 cls.status = 1 7 def setUp(self): 8

FunTester测试框架Redis性能测试实践

经历过FunTester框架Redis压测预备， 下面就应该进入实践阶段了，首先呢，先分享一个对Redis里面不停地添加key-value的测试用例。 控制台输出 INFO-> 当前用户：oker，工作目录：/Users/oker/IdeaProjects/funtester/,系统编码格式:UTF-8,系统Mac OS X版本:10.16 INFO- "table":"eJztk8sKgkAUQPeB/3A/QMFMWvgZ0Q8IDiQ0Fk1BLXtR0Lr5jVb90Cyiz+j2wB5UWj6m4A4XdKPnnHE0KpBuNVgQit12td IcpwZcmNwfem61jrc5VGRdSi5xUpUQpSyKkjOcckgnRNEkJcc45dFuMYXSlJzjlENUcoKDlwXOc2S+5PirXU5jIjc3izh1inPd5A8FMljF6fcel43IUedj4 /dmWgS/KHo8Wq//ov+8HAt/QIMKqZAK9WtQIRVSoX4NKqRCKtSvQYVUSIX6NQotPAA24o0Q" ＞ } ~☢~~☢~~☢~~☢~~☢~~☢~~☢~~☢

8. 黑盒测试 白盒测试 灰盒测试

黑盒测试：黑盒测试也称功能测试，测试中把被测的软件当成一个黑盒子，不关心盒子的内部结构是什么，只关心软件的输入数据与输出数据。 白盒测试：白盒测试又称结构测试、透明盒测试、逻辑驱动测试或基于代码的测试。白盒指的打开盒子，去研究里面的源代码和程序结果。 1）逻辑覆盖法：判定法，条件法，判定和判定组合，条件和条件组合，判定和条件组合 2）循环覆盖法：for / while 3）路径覆盖法：switch / try catch 灰盒测试：是介于白盒测试与黑盒测试之间的一种测试 ，灰盒测试多用于集成测试阶段，不仅关注输出、输入的正确性，同时也关注程序内部的情况（集成测试等）

LLM 性能测试实践

一、引言：为什么LLM性能测试至关重要？ 通过与 ms-swift 训练框架 的无缝集成，开发者可在训练后直接发起性能评测，形成“训练-评测-优化”闭环 三、EvalScope性能测试实践指南 环境搭建 EvalScope 工具的运行需要 Python 标准 OpenAI 格式 对话接口测试 如果 LLM 接口的格式是标准的 OpenAI 格式，则EvalScope通过简单的命令或者脚本就可以快速测试。 这里还额外指定了参数："no_test_connection": True, 主要是为了简化测试流程，否则测试连接时可能会无法正常启动测试，需要额外处理。 : # Decode the response and split by lines lines = response.decode('utf-8'

iOS 电量测试实践

作者：张锦铭团队：腾讯移动品质中心TMQ iOS电量相关问题一直是测试人员头疼的事情，电量测试怎么开展、问题怎么复现和跟进定位、用户反馈电量相关的问题我们如果获取更多的信息等等，一直都没有一个好的解决方案 一、电量测试之农业时代 在之前很长一段时间，我们都是用这种可怜的方式进行电量测试的: 1、选定测试场景以及时长； 2、给手机充放电，让手机剩余电量在我们预设的值，比如90%，每个场景测试开始时，保证手机都是这一电量 可是事实却是，这个接口早在iOS9的第一个版本，就完全被封了，只能在iOS 8上的机子上拿到数据。而且经过多次确认后，我们发现，这个数据是每个小时才会更新一次，并不是实时的。 有了这样全面的官方数据，我们的测试怎么做呢？ 1、首先，上线前的电量测试，只要装上对应的证书，便可开始执行测试，只要记下哪个时间段对应的是哪个场景，然后测试完后，取下系统的数据库，便可以对当次的电量做较全面的评价，例如，某个APP在某场景下，20分钟运行时间

SDK测试实践小结

前言 小编最近参与了两个SDK测试项目，一个是与外部企业APP对接的SDK测试，对于要接入APP完全不了解，只针对SDK demo的功能和调用进行测试；另一个是与公司内部产品APP对接的SDK测试项目， 是针对SDK与APP源码集成后进行测试，通过这两个项目，小编对SDK测试工作有了更深入认识，在此对SDK测试内容和测试方法进行总结分享给大家。 SDK测试内容 SDK测试，是对SDK提供的功能和接口进行测试，测试需要关注哪些内容呢？ 7）安全性测试/隐私数据加密测试 接口的安全性，需要对接口的请求和返回数据加密性的要求进行测试； 8）访问权限的测试 SDK需要访问系统或者APP的某些权限，需要对权限相关进行测试，如SDK需要访问系统麦克风权限 3）基于代码的单元测试 这种方法提测时一般只提供SDK源代码和SDK接口说明文档，测试时针对各个接口方法进行编写测试代码进行单元测试。

负载测试最佳实践

性能测试中最容易被误解的部分之一就是负载测试。大多数人认为所有性能测试就是负载测试，但这是不准确的。有许多类型的测试组成性能测试。 在进行负载测试之前要考虑的问题之前，让我们仔细研究一下负载测试的基本信息。 LoadRunner的基本一种定义：负载测试是许多并发用户运行同一程序，以查看系统基础结构是否在不影响功能或性能的情况下处理了负载。 还有一种说法将负载测试解释为： 负载测试是性能测试的子集。 但是建议在着重负载测试之前首先通过模拟或者监控正常一天的吞吐量来开始负载测试。 这里的关键词是吞吐量，这是另一个经常被误解的性能测试。 测试时间越长，在测试过程中捕获的事件数量就越多，并且无论使用何种工具，对其进行分析都将更具挑战性。 负载测试会生成大量数据。深入研究测试结果并找到所需的一切并不容易。

Spock测试框架实践

测试同学们平时用的比较多的测试框架和工具，如JMockit、EasyMock、Mockito和PowerMock，大家普遍认为代码可读性差，多组测试数据使用起来麻烦等缺点，今天小编就来给大家介绍一款简洁 、优雅、易理解的测试框架——Spock 首先给大家简单介绍下这款测试框架，Spock是一个基于Java和Groovy应用的测试框架，通过JUnit runner调用测试，兼容绝大部分JUnit的运行场景 下面我们开始Spock的实践： 一．环境搭建 IDEA > Eclipse Gradle > Maven (官网中有详细的Gradle配置说明https://gradle.org/) IDEA+Maven 3．创建groovy的测试源码目录：首先在test目录下创建名为groovy的目录，之后将它设为测试源码目录 4．创建一个简单的类 ? 5．我们的目录结构 ? 三.Spock中的许多概念和特征都来自jUnit，我们总结看下Spock测试模板方法的定义和JUnit的对比，后续我们会对各个模板方法进行介绍和测试实践，请大家持续关注搜狗测试公众号。 ?

Jmeter接口测试实践

1.简介 JMeter是开源软件Apache基金会下的一个性能测试工具，用来测试部署在 务器端的应用程序的性能。这里我们用来做接口测试。 4.创建测试计划 创建线程组 ? 创建请求 ? 创建结果树 ? 5.运行测试 ? ?

DevOps 测试实践指南

但是测试 DevOps 的最佳策略是什么呢？本文将讨论 DevOps 的基本概念、生命周期、最佳实践以及我们应该使用的工具。 4DevOps 测试的最佳实践 DevOps 测试工程师需要重新思考软件的 QA 测试策略，以适应从开发到运维的管道阶段。 值得庆幸的是，有一些 DevOps 测试最佳实践可以被理解并能被用于任何应用程序的开发中。解释 DevOps 的每个测试最佳实践超出了本文的范围。 下面列出了实现端到端测试集成的最佳实践： 在集成之前，使用私有实例对应用程序中的更改进行测试，以确保代码的更改不会破坏分支。 DevOps 测试实践强调在类似于生产环境的环境中进行测试的重要性，这可以确保一旦部署到生产环境中，测试就可以覆盖应用程序的所有配置。

Thrift接口测试实践

/usr/bin/env python # -*- coding:utf-8 -*- # author:无涯 import json from login import Login from thrift.transport server.serve() 编写好服务端的代码后，开始编写客户端的代码，也就是具体的API测试用例，这地方主要测试对应的接口信息以及验证服务端返回的响应数据，测试代码如下： #! /usr/bin/env python # -*- coding:utf-8 -*- # author:无涯 import json import uuid from login import Login 其实在之前的文章学习的成本中很详细的介绍到针对不同的协议的测试，本质的核心思想都是一样的，都是客户端与服务端之间的请求/响应模式或者是异步通信的模式。 所以遇到gRPC协议还是Thrift其实看看官方的资料，就能够立刻的编写出API的测试用例。感谢您的阅读，后续持续更新！