求问Data science里面的experiment design

我本身是学Biostatistics哒，最近找工作中，特别想转Data science的工作。

注意到貌似Data Scientist的job description里面有说到experiment design，感觉跟Biostats里面的clinical trial design很像。

我大概猜了下，先是pre-clinical phase,也就是找signal。 然后进入到experiment, 跟biostat 对应的不知道是不是Phase 3。但是我比较困惑的是，在clinical trial是严格控制的randomized trial,在data science 领域是怎么样的？

有没有业内人士可以来介绍一下？

建议看一下A/B testing 相关内容，比如

(1) Dato 的一篇blog
这篇我看过好几遍，并且针对每个点都进行补充了，可以利用wiki补充，后来碰到的面试题基本也都和这篇Blog提到的有关

http://blog.dato.com/how-to-evaluate-machine-learning-models-the-pitfalls-of-ab-testing

(2) Microsoft写过很多industry paper, 总结的很全面

(3) Evan miller 的一个blog 有一些文章
http://www.evanmiller.org/

(4) 有时间可以看一下Multi-arm bandit algorithms
http://engineering.richrelevance.com/bandits-recommendation-systems/

udacity貌似有一门课
expt design直接就是一门学问，you can easily build a DS career on top of this
真不是两句话讲清楚的

小K 发表于 2015-11-18 16:33
udacity貌似有一门课
expt design直接就是一门学问，you can easily build a DS career on top of this
...

谢谢K姐， 我去看看。 以前学过clinical trial design, 还以为可以直接拿来用， 汗了。。。。

basic ideas are the same, sure
but 处理细节差异可以很大
真的不是几下能说清的

K姐 发表于 2015-11-19 14:37
basic ideas are the same, sure
but 处理细节差异可以很大
真的不是几下能说清的

K姐说的是A/B TESTING 那门课吗？我直接搜索experiment design关键词好像搜不到。谢谢了！