google-analytics - Google内容实验的样本量

Question

进行2个变化的Google内容实验时，有人需要我提供什么样的流量/样本数量才能获得统计上显着的结果吗？

Answer 1

Google使用Multi Armed Bandit测试。
这是关于Googles answer的一篇好文章

实际上，最好的方法是在Google Analytics（分析）实验标签中查看该百分比，并查看该百分比向95％转变的速度。

您无法获得确切的答案，因为它会随着您进行测量以及根据您要测量的差异而变化。因此，如果一个变体的效果比另一个变体的效果好300％，则样本量会比一个变体的效果要好于另一个变体的10％小得多。

在这里查看用于直接统计意义的数学如何工作是一个很好的解释。 Statistical significance tutorial

这是一个有计算器Calculator的地方

就多武装强盗的数学而言，彼得·惠特尔的这句话总结起来


[强盗问题]是在[第二次世界大战]中提出的，解决这一问题的努力使盟军分析家的精力和精力大大减退，因此有人建议将这一问题归咎于德国，这是智力破坏的最终手段。