优步挂经，分享一道product题

按照三哥说的 可以找driver supply比较充足（这样对价格的影响是不是会毕竟小一点）且不是要求一年一次的城市或者州开始试验 看一下driver的反响如何，需要的话可以试一下你想到的incentive 并quantify一下driver数量的下降，价格上升程度和rider的减少数量，多久能完成check等等 同时也可以宣传一下这个check，看下在当地短期中期有没有积极的影响

感觉这个举措对rider来说肯定是好的，对driver来说其实也是好消息 因为如果大家觉得uber检查到位了安全了，那么愿意选择uber的rider长期来说是会增加的 driver收益也是增加的

其实我第一反应是 如果背景调查业务增加了 是不是可以和这个调查的公司negotiate一下价格 把可能的差值转移到driver身上，那么背景ok的driver也会因为利益而乐于合作完成调查的 背景有问题的driver带来的减少那也是不可避免的

看到第一反应的感觉也是在考A/B test, 思路大概是先弄清楚改变的目的是什么，出于安全考虑？提高用户忠诚度？how related? what metrics to use to evaluate? 用户举报的减少程度？用户评分的增长率？ 但是我有一点不是很懂，题目里的背景调查的可能需要的时间跨度较长，比如题目里的一年，两年，对于A/B test这种想要用于在短期内看到change的结果，如何定义experimental group呢？

这道题明确了goal和metrics后，ab test要如何做？首先是experiment 和control group怎么选，选两个comparable的城市进行比较吗？那我们常说的sampling要保证randomness在这里怎么解决？还有experiment时间，samplesize，在这里要怎么处理？有木有大神指点一下？

感谢分享 祝好运

duoxie duoxie

感谢楼主分享，能问一下你的面试都有多少轮， 分别主要考察什么知识呢

这些感觉没答到A/B Testing应该必挂的，就像我以前不懂，被人问加个按钮在网页上有什么影响之类的一脸懵逼答了一大堆乱七八糟，其实知道A/B Testing之后看到这些“如何确定”题感觉都是有套路，不过这题怎么testing感觉有很多可以讨论的地方求大神指导，例如怎么分group, 每个司机开的距离不长，评分不同、车的Class不同之类的都会带来很多Bias，可以用一个Zone的Average或者几个变量一起来Cluster减少Bias，至于时间更是个大Bug，正常最好还是测个几年，但是商业决定上肯定是不允许那么长的，感觉只能用Propensity Score的类似方法，找出那些与一年一测最相近的但是没有一年一测的用户，来互相对比各项Metric看看有没有显著差异提升，有的话再看Cost和带来的potential benefits权衡一下。