这个岗位很强调AB Testing 感觉想招一位 强统计背景+强AB TESTING 经验的人
hiring manager 全程围绕ab testing问问题
-
tell me about yor ab testing experiences (Lz 讲了工作中的一个例子)
-
netflix想通过ab testing测试哪个marketing campaign有更高的conversion rate, 这时因为用户的点击率非常低 (e.g. 1/100000 vs 0) 所以effect size非常小, 导致statistical test的power非常小,问这个统计检验还make sense吗?有什么办法可以解决这个问题吗?
lz答可以提高sample size,面试官表示不满意说我们sample size是够的,只是用户的点击率很低
答可以adjust statistical test但没答出来具体用什么办法,面试官表示方向是对的
这个问题答不上来感觉面试官就没什么兴趣了…………希望有abtesting经验的同学们可以分享一下关于这道题的思路!感谢~