A/B测试和统计解决方案

Question

我一直在寻找一个好几个月的测试框架，没有找到任何东西，所以我刚刚建立自己的测试框架。

这就是我想做的事：
- 跟踪任意的行为（例如照片＃看，张贴评论＃）
- 任意变量，这些行为
（例如，如何做不同的版本之间的轨道相关这种提示会影响查看的平均照片数量？）

这种事情应该是敏捷开发的核心部分。那里有什么？我知道Google网站优化工具是其中的一个答案，但您只能跟踪以单个“成功”页面结束的行为。

这将会是巨大的，有可能你的代码中工作插件（在我的情况的Rails）和饲料与漂亮的图形一个漂亮的托管服务...

Answer 1

您可能需要分割你的问题分解成分析（展示次数，操作和可能的页内事件，测试报告）以及用于提供变体的框架（您如何在实际准备中管理x变体，您是否需要为将来存储变体参考，打开和关闭测试，优化测试的有效性等）。显然存在重叠，比方说，Google网站优化工具可以在数据支持它时立即关闭一个不好的变体，但通过将这个问题考虑为不同的问题，您可能可以重用Google Analytics组件。

Answer 2

是的，在这里：

http://github.com/paulmars/seven_minute_abs/tree/master