在运行AB测试时，如何处理Selenium测试？

Question

我们刚刚开始使用Selenium来测试我们的站点，它运行得很好，只是当我们引入AB测试时，它破坏了1/2的时间。在用Selenium测试时，你们是如何处理抗体测试的？

谢谢!

Answer 1

这取决于你到底在找什么。我建议三种选择之一：

1. Disable A/B检测硒的。测试的关键之一是确定。通过随机回归，你将无法对你的结果那么有信心。为了实现这一点，我将传入一个参数，例如http://my.website.com/?ab=0。
2. 为Selenium构建了一个参数，以“选择”ab测试用例。http://my.website.com/?ab[show-panel]=1。同样，这将给出一个确定的结果，并允许您实际测试您拥有的ab测试用例。这也可以通过创造性地使用setup.
3. Hack-中的cookie来实现--不要“检查”站点的and测试方面，并构建selenium来导航它们。这完全取决于您正在测试的内容，但如果是图像或文本，这不应该是一个问题。不应该测试不确定的工作流。

希望这些想法能有所帮助。这里的目的是确保在测试中保持确定性。随机只会让你误入歧途。