如何在运行AB测试时使用Selenium处理测试？

Question

我们刚刚开始使用Selenium来测试我们的网站，并且它的工作非常好，除了它在我们引入AB测试时打破了1/2的时间。在使用Selenium进行测试时，你们如何处理Ab测试？

谢谢！

Answer 1

这真的取决于你在找什么。我建议的三个选项之一：

1. 禁用A/B测试的硒。测试的关键之一是确定。随机回报，你将无法对自己的结果充满信心。为了做到这一点，我会传入一个参数，例如http://my.website.com/?ab=0。这总是可以选择一个将要测试的特定路径。

2. 为Selenium建立一个参数来“选择”ab测试用例。 http://my.website.com/?ab[show-panel]=1。再次，这会给你一个确定性的结果，并允许你实际测试你有的ab测试用例。这也可以通过在您的设置中使用Cookie来创造。

3. 黑客 - 不要“检查”您的网站的a-b测试方面，并建立硒来浏览它们。这取决于你正在测试的内容，但如果它是图像或文本，这应该不是问题。不确定性的工作流程不应该被测试。

希望这些想法有所帮助。这里的外延是确保为测试保持确定性。随机只会让你误入歧途。