📣 黑五价提前开抢|VIP一年通行证5折,蓝莓、Offer多多同步特惠
查看: 827| 回复: 1
跳转到指定楼层
上一主题 下一主题
收起左侧

求问实际工作中AB test如何实现控制变量或stratified sampling或保证AA test 成功

全局:

注册一亩三分地论坛,查看更多干货!

您需要 登录 才可以下载或查看附件。没有帐号?注册账号

x
如题,面试的时候被问到A/B Testing 设计实验要注意什么,我们自然会答控制confounding variables,但很想知道在实际操作中到底是怎么实现控制其他变量或stratified sampling 以保证试验结束后的A/A test 成功呢?因为我目前能想到的实际操作中以单个用户为experiment unit为例, 基本思想都是设一个随机概率把他分配到实验组或对照组,但到底这个用户其他的性质是什么样的我们并不能提前知道或控制。举个例子,比如我们想测试改网站标题颜色会不会影响conversion rate,每个用户来了我们按5:5 概率把他们分到实验组和对照组, 但这样子并不一定能保证最终实验组和对照组其他的变量比如性别、年龄、用户来源、用户使用产品的资历等等变量都一样啊。

还望实操经验丰富的朋友能提供点思路,谢谢!🙏

上一篇:12月毕业,非常焦虑
下一篇:DS 对比 SDE 薪资水平和上岸难度?
🔗
dajiangdongqu 2022-12-27 10:54:59 | 只看该作者
全局:
施主要学会换位思考; 你想想如果你是大老板,这个网站就是你的,每天你日理万机,然后手下拿来报告标题是红是绿,你怎么办 ?
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册账号
隐私提醒:
  • ☑ 禁止发布广告,拉群,贴个人联系方式:找人请去🔗同学同事飞友,拉群请去🔗拉群结伴,广告请去🔗跳蚤市场,和 🔗租房广告|找室友
  • ☑ 论坛内容在发帖 30 分钟内可以编辑,过后则不能删帖。为防止被骚扰甚至人肉,不要公开留微信等联系方式,如有需求请以论坛私信方式发送。
  • ☑ 干货版块可免费使用 🔗超级匿名:面经(美国面经、中国面经、数科面经、PM面经),抖包袱(美国、中国)和录取汇报、定位选校版
  • ☑ 查阅全站 🔗各种匿名方法

本版积分规则

>
快速回复 返回顶部 返回列表