Facebook 的A/B

大家来说说Facebook A/B testing 中是如何处理network effect的？

感兴趣的话可以看一下这篇facebook组发的paper：https://research.facebook.com/pu ... mentation-at-scale/

匿名用户 发表于 2024-10-21 19:35
好奇，蹲答案

linkedin，fb，airbnb这些总说自己ab test怎样怎样解决了network/spillover effect，好奇 ...

没有做的必要，10000-11000的工作才需要measure network effect，1m-1.001m的工作就算network effect污染了holdout那区别也不大，正好当post launch效果差的挡箭牌

这题是什么意思？
AB两边互相影响？

好奇，蹲答案

linkedin，fb，airbnb这些总说自己ab test怎样怎样解决了network/spillover effect，好奇平常那么多的active daily experiments真的有用到它们提出的那些方法么？他们是真的把那些方法写进production workflow了？？

内部是有的，10+年前就在做实验了。我有份工作在一个中厂也有这个都几年前了
具体实施方法其实就那些，随便网上一搜，原理都大差不差。

+1