用于驱动测试自动化的图像识别

Question

有没有什么工具可以使用图像识别(搜索，比较，验证图像)作为自动化和测试GUI软件的基础。我知道ranorex支持它。有没有更好的工具?使用图像识别来驱动测试自动化有什么问题吗？

Answer 1

好的，首先，我理解前面的答案:使用图像识别测试应用程序不是测试GUI的最佳方式。但是，同时，我不明白为什么你不首先回答这个问题。他要求的工具是这样工作的，我认为他足够聪明，知道他要做的是什么。

好了，现在主要的主题，我的选择将包括：

在类似GNU的麻省理工学院许可下

• Sikuli，一个麻省理工学院项目。它使用Python而不是Jython。Free.
• TestPlant eggPlant，是一个通过VNC服务器工作的工具，因此您可以在任何兼容VNC的平台(包括智能手机)上测试应用程序。它有一些很好的功能，比如OCR，考试日程等等。它使用SenseTalk。不是免费的，你可以申请一个我从未用过的trial.
• Routine Bot，，但它看起来很有用。

Answer 2

我也不鼓励使用带有SendKeys和单击坐标或(按钮图像)的图像识别来进行UI测试。我最近一直在使用UI Automation自动化WPF应用程序的测试，并取得了成功。通过在我们的应用程序的XAML中放置小的面包屑(Automation.AutomationID="OkButton")，我已经能够编写一些C#单元测试来测试应用程序的不同方面。即使没有breadcrumbs，UI Automation仍然能够执行应用程序，但在尝试识别UI上的控件时会稍微困难一些。

有一篇关于Code Project的不错的文章可以作为起点。

http://www.codeproject.com/KB/WPF/UIAutomation.aspx

您还需要UI Spy，这是一个来自Microsoft的免费工具，它可以帮助您查找控件，并通过UI Automation手动执行控件，作为编写脚本的指导。该工具埋藏在Windows Vista SDK中，安装后搜索UISpy.exe。UI间谍工具仍然可以在Windows XP计算机上运行，只需将EXE复制到目标计算机即可。

Answer 3

考虑将AutoItScript用于在测试场景中驱动基于Windows-以及剥离UI。以tesseract开源光学字符识别为例。也可以用于机器视觉的OpenCV。

免费的AutoItScript在应用程序接口级别工作，你可以读取各种窗口部件和窗口部分的状态，也可以向这些UI组件发送操作，等待状态更改等。