Tiktok求职：数据科学面试中的 7 个 A/B 测试问题和答案（上）——设计AB实验

A/B Test是数据分析师和数据科学家日常工作的重要组成部分，因此在面试中，也会进行专门的考察。现在来介绍下在面试中最常被考到的一些问题以及可能的解法。


1.多长时间运行一次实验？
为了确定实验的持续时间，我们需要计算实验的样本量。这里需要三个参数，分别是：

Type II Error (β) 或 Power，其中 Power = 1 - β。
显着性水平α
Miniumal Detecable Effect
这里推荐一个网站，可以非常快捷的计算出实验所需样本量


同时，样本量也可以按照如下方式计算：
在面试过程中，你不需要解释你是如何得出这个公式的，但可能会被问到的是，每个参数如何计算以及每个参数如何影响样本量。例如，如果样本方差较大，我们需要更多的样本，如果要看到的delta 较大，我们需要更少的样本。
. 1point3acres.com

样本方差可以从现有数据中获得，但是我们如何估计δ，即实验组和对照组之间的差异？

实际上，我们在进行实验之前并不知道这一点，这就是我们使用最后一个参数的地方：minimal detectable effect，也即实验中可被检测出来的最小差异。例如，我们可以将收入增加 0.1% 视为最小可检测差异。实际

您好！
本帖隐藏的内容需要积分高于 188 才可浏览
您当前积分为 0。
使用VIP即刻解锁阅读权限或查看其他获取积分的方式

游客，您好！
本帖隐藏的内容需要积分高于 188 才可浏览
您当前积分为 0。
VIP即刻解锁阅读权限 或 查看其他获取积分的方式
Unlock interview details and practice with AI
Curated Interview Questions from Top Companies

用户直接相关的人组成。

双边市场：

基于地理位置的随机化。比如，我们可以将纽约都会区作为对照组，将旧金山湾区作为实验组。这将允许我们隔离每个组中的用户，但可能的问题是差异也许会更大，因为每个市场还是具有自己的特征的，例如客户的行为、竞争对手等。

是基于时间的随机化。不太常用的一种方法，基本上，我们选择一个随机时间，例如一周中的某一天，并将所有用户分配到实验组或对照组。它在实验效果仅持续很短的时间时起作用，例如在测试新的激增价格算法时表现更好。当实验效果需要很长时间才能生效时，它不起作用。

希望大家面试过过过！求加米😳

感谢楼主分享。感觉对双边市场的讲解很有用处，我在工作中也经常遇到类似的问题。

赞一个，支持支持

下呢？？？？？？？？？？？

这是emma ding的文章把。