问题描述
我正在运行 A/B 测试,我想以 90% 的置信度在两侧检查统计显着性。我已经计算了标准误差、z 分数和 p 值。
我是说,当我的 p 值低于 0.1 和大于 0.9 时,我才有意义。我对吗?我正在使用此工具 https://vwo.com/blog/ab-testing-significance-calculator-spreadsheet-in-excel/
我在怀疑它是否应该低于 0.05 和大于 0.95。
我想我在脑子里把事情搞混了。因为,我有 p 值,我说我的 alpha 是 0.1。我不是在计算 alpha/2 和 p-value/2,我也不需要它。那么,我是否应该只检查 p 值是否低于 0.1,仅此而已?甚至不大于 0.9?
解决方法
90% 置信区间意味着您有 10% 作为拒绝区域,在尾部区域将其分为两侧相等的两半。
你说得对!只需检查 p 值是否小于 5% 或 0.05 并且大于 95% 或 0.95,因为此范围代表拒绝区域
如果 p 值在上述范围内,则可以拒绝原假设。