请教一个A/B test的问题

Frankford 发表于 2018-1-28 05:26
想再问你一个问题，我有一次面试被问到是否要每天CHECK A/B TEST 的DATA DURING EXPERIMENTAL PERIOD. 比 ...

我的理解是不需要，在你实验所需要的时间内，都不要管他。你觉得呢?

louisgogogogo 发表于 2018-1-29 00:15
我的理解是不需要，在你实验所需要的时间内，都不要管他。你觉得呢?

我也是回答不需要。但是我没拿到OFFER。就不知道正确答案。

louisgogogogo 发表于 2018-1-22 06:12
1.goal：测量改过的button是否提高了点击率
2.control group是原来的button（红色）, treatment group是改 ...

在学习AB testing, 谢谢你的分析！

lyw211 发表于 2019-1-26 04:25
在学习AB testing, 谢谢你的分析！

不客气~~~~

Frankford 发表于 2018-1-29 00:39
我也是回答不需要。但是我没拿到OFFER。就不知道正确答案。

确实是不需要 因为偶然有一天p值很小，小到可以拒绝原假设 然后你就说拒绝原假设 这样是不对的 因为那一天可能只是偶然 举个例子：两个队比赛，最后平局，但是中间某个时刻A队领先B队，你不能看到这一幕就说A最后赢了比赛。我觉得你没有拿offer可能是别的原因，比如你没有合理的解释为什么不需要，或者别的题目没答好，或者只是差点运气