【问题标题】:Determine sample size for A/B testing, more than 2 variants确定 A/B 测试的样本量,超过 2 个变体
【发布时间】:2016-09-15 20:37:11
【问题描述】:

如果我们想确定此类测试的样本量,我们应该使用什么 R 函数:

10 个广告,我们想通过测试来确定哪些广告的点击率最高。我们可以统计流量和点击次数。

【问题讨论】:

    标签: ab-testing multivariate-testing hypothesis-test abtest experimental-design


    【解决方案1】:

    我不认为变体体验的数量会有所不同。在每个中,您将一个指标与控制中的相同指标进行比较,因此在每个中,您都会有自己的显着样本量:与控制的差异越小,样本量就越大。

    近年来争论的焦点是相关的:如何在运行时优化体验之间的流量分配,以便在调用所有变体时,大部分变体已经经历了您的获胜体验。 Google(实验)为此设计了一种他们称之为 Multi-Arm Bandid 算法的东西,但据我所知,它还没有在同行评审的期刊上发表过,这可能是有原因的。

    祝你好运!

    【讨论】:

      猜你喜欢
      • 2020-09-27
      • 1970-01-01
      • 1970-01-01
      • 2020-12-27
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2011-10-19
      相关资源
      最近更新 更多