📣 黑五价提前开抢|VIP一年通行证5折,蓝莓、Offer多多同步特惠
查看: 2720| 回复: 2
跳转到指定楼层
上一主题 下一主题
收起左侧

【假设检验方法总结】参数检验|非参数检验|T test | Z test | ANOVA | etc.

全局:

注册一亩三分地论坛,查看更多干货!

您需要 登录 才可以下载或查看附件。没有帐号?注册账号

x
面试过程中经常会涉及假设检验的问题诸如:
  • 假设检验的方法有哪些?
  • 样本量应该选取多大?
  • 如何判断显著性?


#其实在DS的日常工作AB Testing最主要用到的就是t test,但是面试的时候有时候涉及到的内容会相对比较全面。
我自己也是看一遍忘一遍😂 系统性地梳理了一下知识点,感觉按照这个逻辑展开会比较有助于理解和记忆,也希望能够对大家有帮助:)

这篇分享涉及的主要知识点如下:
  • 假设检验的概念
  • 参数和非参数检验的区别
  • 如何判断应该选择参数检验还是非参数检验
  • 应该选择的具体检验方法是什么
  • 参数检验和非参数检验的优缺点对比. 1point 3 acres




1. 什么是假设检验?
在生活中,我们往往会需要对某个总体的数据进行评估,或者对总体和总体的数据进行差异比较。由于无法对全量的数据进行统计,因此我们需要通过样本抽取的方法,基于【样本】评估【总体】的情况。
而假设检验的本质就是:我们需要构造合适的统计量,从而对总体进行正确的评估。
这里的构造方法则可分为:参数和非参数的方法。


2. 参数检验和非参数检验有什么区别?

Assumption Difference。
参数检验的假设前提是样本服从正态分布,而非参数检验则不对样本的分布情况做任何预设。. 1point 3acres

🌟🌟🌟3. 如何判断应该选择的检验方法?
首先,判断应该选择参数检验还是非参数检验
3.1. 根据数据分布情况判断:
非参数假设通常在样本分布不服从正态时被使用。
我们可以根据正态统计检验或基于数据计算出偏低/峰度,从而确定样本的分布情况。

3.2. 根据数据类型判断:
对于类变量,例如nominal/ordinal data, 采取非参检验;
对于数值变量,例如interval/ratio data, 采取参数检验。.
当然,使用参数检验的前提必须是样本近似服从正态分布。

3.3 确定了参数/非参数检验方法之后,我们需要根据样本组的个数,样本之间的独立关系等,选择对应的具体检验方法。.
step1: 判断正态分布性.--
step2: 若符合正态,则选用参数检验,不符合则非参;. 1point 3 acres
step3: 参数检验中,t test和z test的最主要区别是,前者假设population variance unknown,后者假设known,一般来说小样本量(<30)用t,大样本量用z; 配对样本用paired z test,单一样本用单样本t test,检验多组别(大于等于2)中各组数据差异用ANOVA。
step4: 非参数和参数的最大区别,非参数检验比较的是中位数不是样本均值。对于样本数量小于等于2的情况,若样本独立则用Mann Whitney, 样本配对/单一样本用Wicoxon, 非参数检验中和ANOVA相对应的是Kruscal Wallis, 如果比较频数在各个组别中的差异(例如吸烟和不吸烟的人数比例在男/女中是否有明显差异?)则用Chi- Square。
图片帮大家总结了各个统计方法的适用场景~
. ----



4. 参数检验和非参数检验的优缺点比较
参数检验相比非参数检验来说,具有:
【更强的灵敏度和统计检验效力】
然而因为参数检验具有更强的先置条件,因此非参数检验会具有【更为广泛的适用范围】
通常来说,参数检验能带来更好的统计学结果。
在以下情况下,我们必须采取非参数检验:
▪️当参数检验的前置条件被违背. .и
▪️样本量过小
▪️希望评估的对象为样本中位数而非样本均值

截屏2022-08-12 下午9.37.09.png (424.22 KB, 下载次数: 9)

截屏2022-08-12 下午9.37.09.png

评分

参与人数 2大米 +3 收起 理由
光影流转 + 2 给你点个赞!
非著名农民 + 1 赞一个

查看全部评分


上一篇:mlops 对比 sde
下一篇:关于Udacity Data scientist的Nanodegree系列课程

本帖被以下淘专辑推荐:

  • · DS|主题: 224, 订阅: 39
全局:
这个总结相当好
回复

使用道具 举报

全局:
总结得很好~感谢楼主分享
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册账号
隐私提醒:
  • ☑ 禁止发布广告,拉群,贴个人联系方式:找人请去🔗同学同事飞友,拉群请去🔗拉群结伴,广告请去🔗跳蚤市场,和 🔗租房广告|找室友
  • ☑ 论坛内容在发帖 30 分钟内可以编辑,过后则不能删帖。为防止被骚扰甚至人肉,不要公开留微信等联系方式,如有需求请以论坛私信方式发送。
  • ☑ 干货版块可免费使用 🔗超级匿名:面经(美国面经、中国面经、数科面经、PM面经),抖包袱(美国、中国)和录取汇报、定位选校版
  • ☑ 查阅全站 🔗各种匿名方法

本版积分规则

>
快速回复 返回顶部 返回列表