如何测试和记录第三方应用程序？

Question

我在一个小型组织工作，它为我们的用户托管第三方应用程序(商业软件)。软件是相当全面的；我们只使用一个子集的功能。另一方面，软件供应商为我们创建了一些自定义。我们可以向软件供应商提交带有错误报告和特性请求的票据。

当新的软件版本发布时，我们希望确保

• 对于我们的需要，在功能中没有错误/回归。
• 新特性没有错误。
• 新特性对我们的需求是有用的。

我们的测试主要包括“单击字段A，单击字段B，输入asdf，查看字段C中发生了什么”。

目前，我们维护一个包含测试、预期/实际结果、版本信息、票证信息和评论的大型电子表格。随着电子表格的增长，它变得越来越不可用。

什么是建议的解决方案来跟踪我们的测试，测试结果，票证信息等？请注意，我们是一个小型组织(2-3名技术人员).

Answer 1

对于这种规模的团队来说，使用时间的唯一方法，以及工具正常工作的一些基本安全性，就是在可能的情况下识别并将该工具分成几个模块。

• 尽可能地将其划分为多个模块
• 阅读修补程序/发布说明(如果可以的话)，并运行只涉及该区域的测试。
• 除该模块外，执行一般(健全)测试，以确保核心功能正常工作。

长期运行的附加任务

• 当您可以在整个工具上执行回归测试时，尝试制定时间表(这将取决于更新的数量和大小以及您的团队每个月可以分配的时间)。

尝试收集关于该工具和版本或即将发布的版本的任何其他信息，从论坛、站点和/或技术支持中收集一些关于已知问题的内部信息，这些信息将帮助您正确判断何时以及如何执行这些测试。