A/B测试转化率的影响大小计算答案

【问题标题】：Effect Size Calculation on Conversion Rates of A/B TestingA/B测试转化率的影响大小计算
【发布时间】：2018-07-26 17:14:23
【问题描述】：

尝试衡量实验组在转化率方面优于对照组的可能性。

业务背景： 1. 样本量：80000， 2.样品：2个， 3.样品A转换：1800， 4.样品B转换：1896， 5、显着水平：0.05

我正在试图弄清楚如何让 d 计算 r 中 qwr 包中的功率：

这是我的代码：

pwr.t.test(
      n=80000,
      d=???,
      sig.level = 0.05,
      power=NULL,
      type = "two.sample",
      alternative = "two.sided"
      )

如果您有任何问题，请告诉我。

非常感谢！

【问题讨论】：

你需要给它一个power的值，它才能给你一个效果大小。在0.8 的幂时，效果大小为0.014。
如果要计算功效，如何从观察中得到效果大小数？

标签： r ab-testing

【解决方案1】：

h=ES.h(0.212,0.02)
#I think this will work.
#And use:
 pwr.p.test(
  n=80000,
  h=0.00844915,
  sig.level = 0.05,
  power=NULL,     
   alternative = "greater"
 )

此链接意外回答了我的问题： Sample size and power calculation in r as viable alternative to proc power in SAS?

【讨论】：