统计学基础3-假设检验

假设检验、显著性水平α、P值、置信区间 什么是假设检验统计学有两个推断统计方法,一个是参数估计,另一个是假设检验。 参数估计用样本统计量来推断总体参数的方法 假设检验是基于某一假设的前提下,同样利用样本统计量去检验这个假设是否成立。 假设检验的方法论 (1)提出原假设; 假设分为原假设H0和备选假设H1 H0一般是我们想要拒绝的假设 一般是=、>=、<= H1是我们想要接受的假设 一般是<> 、 >、< (2)选择假设检验方法,计算检验统计量; (3)判断临界值,得出结论;(根据检验统计量或P值) 阅读详情

假设检验

定义

假设检验是用来判断样本与样本,样本与总体的差异是由抽样误差引起还是本质差别造成的统计推断方法。其基本原理是先对总体的特征作出某种假设,然后通过抽样研究的统计推理,对此假设应该被拒绝还是接受作出推断。

基本原理

1.先假设总体某项假设成立,计算其会导致什么结果产生。若导致不合理现象产生,则拒绝原先的假设。若并不导致不合理的现象产生,则不能拒绝原先假设,从而接受原先假设。
2.它又不同于一般的反证法。所谓不合理现象产生,并非指形式逻辑上的绝对矛盾,而是基于小概率原理:概率很小的事件在一次试验中几乎是不可能发生的,若发生了,就是不合理的。至于怎样才算是“小概率”呢?通常可将概率不超过0.05的事件称为“小概率事件”,也可视具体情形而取0.1或0.01等。在假设检验中常记这个概率为α,称为显著性水平。而把原先设定的假设成为原假设,记作H0。把与H0相反的假设称为备择假设,它是原假设被拒绝时而应接受的假设,记作H1。

案例

假设检验在卷烟质量判断中的应用
  在卷烟生产企业经常会遇到如下的问题:卷烟检验标准中要求烟支的某项缺陷的不合格品率P不能超过3%,现从一批产品中随机抽取50支卷烟进行检验,发现有2支不合格品,问此批产品能否放行?按照一般的习惯性思维:50支中有2支不合格品,不合格品率就是4%,超过了原来设置的3%的不合格品率,因此不能放行。但如果根据假设检验的理论,在α=0.05的显著性水平下,该批产品应该可以放行。这是为什么呢?
  最关键的是由于我们是在一批产品中进行抽样检验,用抽样样本的质量水平来判别整批的质量水平,这里就有一个抽样风险的问题。举例来说,我们的这批产品共有10000支卷烟,里面有4支不合格品,不合格品率是0.04%,远低于3%的合格放行不合格品率。但我们的检验要求是随机抽样50支,用这50支的质量水平来判别整批 10000支的质量水平。如果在50支中恰好抽到了2支甚至更多的不合格品,简单地用抽到的不合格品数除以50来作为不合格品率来判断,那我们就会对这批质量水平合格的产品进行误判。

如何科学地进行判断呢?这就要用到假设检验的理论。

  • 步骤1:建立假设

要检验的假设是不合格品率P是否不超过3%,因此立假设

H0:P≤0.03

这是原假设,其意是:与检验标准一致。

H1:P>0.03

  • 步骤2:选择检验统计量,给出拒绝域的形式

若把比例P看作n=1的二项分别b(1,p)中成功的概率,则可在大样本场合(一般n≥25)获得参数p的近似μ的检验,可得样本统计量: 近似服从N(0,1)

其中=2/50=0.04,p=0.03,n=50

  • 步骤3:给出显著性水平α,常取α=0.05。

  • 步骤4:定出临界值,写出拒绝域W。

根据α=0.05及备择假设知道拒绝域W为

  • 步骤5:由样本观测值,求得样本统计量,并判断。

  • 结论:在α=0.05时,样本观测值未落在拒绝域,所以不能拒绝原假设,应允许这批产品出厂。

假设检验中的两类错误

进一步研究一下这个例子,在50个样品中抽到多少个不合格品,就要拒绝入库呢?我们仍取α=0.05,根据上述公式,得出,解得x>3.48,也就是在50个样品中抽到4个不合格品才能判整批为不合格。

而如果我们改变α的取值,也就是我们定义的小概率的取值,比如说取α=0.01,认为概率不超过0.01的事件发生了就是不合理的了,那又会怎样呢?还是用上面的公式计算,则得出,解得x>4.30,也就是在50个样品中抽到5个不合格品才能判整批为不合格。检验要求是不合格品率P不能超过3%,而现在根据α=0.01,算出来50个样品中抽到5个不合格品才能判整批为不合格,会不会犯错误啊!假设检验是根据样本的情况作的统计推断,是推断就会犯错误,我们的任务是控制犯错误的概率。在假设检验中,错误有两类:

1.  第一类错误(拒真错误):原假设H0为真(批产品质量是合格的),但由于抽样的随机性(抽到过多的不合格品),样本落在拒绝域W内,从而导致拒绝H0(根据样本的情况把批质量判断为不合格)。其发生的概率记为α,也就是显著性水平。α控制的其实是生产方的风险,控制的是生产方所承担的批质量合格而不被接受的风险。

2.  第二类错误(取伪错误):原假设H0不真(批产品质量是不合格的),但由于抽样的随机性(抽到过少的不合格品),样本落在W外,从而导致接受H0(根据样本的情况把批质量判断为合格)。其发生的概率记为β。β控制的其实是使用方的风险,控制的是使用方所承担的接受质量不合格批的风险。

再回到刚刚计算的上例的情况,α由0.05变化为0.01,我们对批质量不合格的判断由50 个样本中出现4个不合格变化为5个,批质量是合格的而不被接受的风险就小了,犯第一类错误的风险小了,也就是生产方的风险小了;但同时随着α的减小对批质量不合格的判断条件其实放宽了——50个样本中出现4个不合格变化为5个,批质量是不合格的而被接受的风险大了;犯第二类错误的风险大了,也就是使用方的风险大了。 在相同样本量下,要使α小,必导致β大;要使β小,必导致α大,要同时兼顾生产方和使用方的风险是不可能的。要使α、β皆小,只有增大样本量,这又增加了质量成本。

参考文献:
https://blog.csdn.net/ch1209498273/article/details/78313883
https://blog.csdn.net/ch1209498273/article/details/78314138
https://blog.csdn.net/andy_shenzl/article/details/81453509

统计学理论—假设检验 在学习统计学贾书的过程,在第6—14章节出有许多需要理解与记忆的公式和概念,在此通过博客的形式做一次梳理,主要内容为统计学样分布、假设检验、参数估计、分类数据分析、方差分析、一元二元线性分析、时间序列分析、指数的理论知识,不足之处望多多指正。 ... 阅读详情

相关推荐

统计假设检验之显著性检验(significance test)

一、显著性检验前传:什么是显著性检验?它与统计假设检验有什么关系?为什么要做显著性检验? “显著性检验”实际上是英文 significance test 的汉语译名。在统计学中,显著性检验是“统计假设检验”(Statistical hypothesis testing)的一种,显著性检验是用于检测科学实验中实验组与对照组之间是否有差异以及差异是否显著的办法,也是为了突出实验组效果比对照组效果明显,否则的话也便没有什么意义可言。实际上,了解显著性检验的“宗门背景”(统计假设检验)更有助于一个科研新手理解显著

平平淡淡,戒急用忍,一生学闭嘴。 1万+

数据分析_Scipy

文章目录一、统计学基础-变量及分布1. 常见的数据分布类型2. 统计分布3. 离散型概分析-伯努利分布4. 连续型概分布-正态分布(1)、3σ原则识别异常值(2)、正态分布绘制(3)、正态分布案例1(4)、正态分布案例2二、假设检验1. 样2. 正态分布和T分布3. 假设检验4. 假设检验案例(1)、描述统计分析(2)、推断统计(3)、假设检验步骤 一、统计学基础-变量及分布 1. 常见的数据分布类型 1、常见的数据分布类型:(离散型) 根据名称很好理解:就是数据的取值是不连续的。例如掷硬币就是

JanLEE 332

统计(三)常见分布与假设检验

常见分布与假设检验一、一般随机变量二、常见分布1.离散型分布(1)二项分布(2)泊松分布(3)几何分布(4)负二项分布(5)超几何分布2.连续型分布(1)均匀分布(2)正态分布(3)指数分布(4)Γ分布(5)威布尔分布(Weibull)3.常见分布的均值和方差汇总4.Python代码实战(1)生成一组符合特定分布的随机数(2)计算统计分布的PMF和PDF(3)统计分布可视化三、假设检验1.基本概念2.基本步骤3.选择统计量(1)T检验①单样本T检验②配对样本T检验③独立样本T检验(2)Z检验3)F检验(4

懒得聪明的博客 1万+

假设检验(Hypothesis Testing)

什么是假设检验   假设检验是用来判断样本与样本,样本与总体的差异是由样误差引起还是本质差别造成的统计推断方法。其基本原理是先对总体的特征作出某种假设,然后通过样研究的统计推理,对此假设应该被拒绝还是接受作出推断。   生物象的个体差异是客观存在,以致样误差不可避免,所以我们不能仅凭个别样本的值来下结论。当遇到两个或几个样本均数(或)、样本均数()与已知总体均数()有

芦金宇的专栏 2万+

学习笔记 | 假设检验概念、小概事件、P-Value与显著性水平、假设检验步骤

01 假设检验概念 02 小概事件 03 P-Value与显著性水平 04 假设检验步骤

大虎牙的博客 7854

假设检验|第三章:统计学中的显著性水平α和P

文章来自微信公众号:发Minitab 概述 在假设检验中,我们很多时候对显著性水平α和P值理解不透彻?在这篇文章中,我将继续关注概念和图形,以帮助您更直观地理解假设检验统计学中的工作原理。 为了实它,我将在我之前文章的基础上将显著性水平α和P值添加到图形中,以便执行单样本t检验。当您可以看到真正意义上的统计意义时,您会更容易理解! 在上一篇文章中我们想确定我们的样本平均值(330.6)是否表明今年的平均能源成本与去年260美元的平均能源成本显著不同。 上面的概分布图显示了我们在原假设为

taoy86的博客 1万+

【概论】- (2)假设检验

在数据分析过程中,一个完整的闭环是从数据中得到洞察,根据洞察得到某种假设,通过实验检验这一假设。 实验环节中会涉及到一些概论知识,比如统计推断中重要的两类问题,区间估计和假设检验。之前概论学过相关知识,但已经有些模糊,在此复习记录。 区间估计 假设检验 假设检验有两种求解思路,分别是: 临界值法:计算拒绝域,比较检验统计量与拒绝域确定结果 p值检验法:计算检验统计量得到 ppp 值,比较...

机器学习,大数据 3839

统计学基础3假设检验

什么是假设检验 假设检验是数理统计中研究的一类基本问题,它是利用从总体样得到的信息即样本,来检验对总体的某种假设的正确性,从而做出接受或拒绝的决定。 假设检验是推断统计的最后一步,是依据一定的假设条件由样本推断中体的一种方法。 假设检验的基本思想 假设检验的基本思想是小概反证法思想,小概思想认为小概事件再一次试验中基本不可能发生。根据这种思想,首先,我们需要对总体作出一个假设,即原假设H0...

stars 3036

基础到实战的量化交易全流程学习:1.3 数学与统计学基础——概与统计基础 | 假设检验

第一部分:概与统计基础 第4节:假设检验:t检验、F检验、卡方检验及其在策略有效性验证中的应用

🚀免费专栏:✅穿越之灵脉重构师:重启天元代码系列✅Python筑基系列✅创新语言开发系列✅代码故事茶馆✅AI筑梦工作站 1678

【定量分析、量化金融与统计学】统计推断基础 番外(3---假设检验例题讲解

一、前言 本节复习假设检验,所用到的表格和基础知识均已经讲过,所以本篇是单纯的练习,也是提供一些练手的试题给大家。不讲原理。 二、例题

从基础开始,注意细节,不要骄傲 599

统计学基础入门必学--相关系数检验与t检验:数据分析和假设检验的核心工具--附清华大学出版社4本SPSS教材和3本Stata教材权威指导

本文系统介绍了统计学中相关系数检验与t检验的核心原理、应用场景及操作步骤。相关系数检验用于量化变量间线性关联(Pearson/Spearman),而t检验用于比较均值差异(单样本/独立/配对)。通过运动减重、药物疗效等案例解析方法应用,强调数据正态性、方差齐性等前提条件。针对常见误区(如混淆相关性因果性),提出改用Spearman检验或非参数方法等解决方案。最后推荐SPSS/Stata实用教材,建议结合软件操作学习,并附实证研究与论文写作指导。全文提供从基础原理到实践应用的完整闭环。

m0_72274883的博客 1507

统计学 任务3

sinat_30799769的博客 182

统计推断 翻译版原书第二版资源介绍

统计推断 翻译版原书第二版资源介绍 【下载地址】统计推断翻译版原书第二版资源介绍 《统计推断》中文版第二版是统计学领域的经典教材,由张忠占和傅莺莺翻译,内容涵盖概基础、估计与假设检验、回归理论等核心知识。本书系统讲解了统计推断的基本理论和方法,适合统计学专业学生和研究者深入学习。资源提供详细的概论、估计理论、假设检...

gitblog_06724的博客 326

统计学基础--假设检验

假设检验 1、假设检验的由来 我们先看一个例子: 那么如何检验这位女士的说法呢?FISHER进行了研究,从而提出了假设检验的思想。 比如: 正常情况下我们去猜先倒茶还是先倒牛奶的话,概应该是1/2, 1.总共检验了两杯,全部猜对的概是:0.5✖️0.5=0.25,虽然概很低,但是也算正常; 2.继续猜,又猜了两次,也全部猜对了几是=0.0625,这个概明显是非常低...

Andy_shenzl的博客 5万+

显著性水平、置信区间、假设检验与方差分析知识点总结

显著性水平、置信区间、假设检验与方差分析相关知识点总结

weixin_44304168的博客 5万+

统计学》笔记:第8章 假设检验

统计学(第六版)》贾俊平 第8章 假设检验 参数估计 parameter estimation 参数估计讨论的是用样本统计量你估计总体参数的方法,总体参数μ在估计前未知的。 假设检验 hypothesis testing 在假设检验中,是先对μ的值提出一个假设,然后利用样本信息去检验这个假设是否成立。【批:假设检验的基本思想是基于概的反证法。根据问题提出原假设和备择假设,在先假设原假设是正确的前提醒,构造一个小概事件,然后根据取的样本去检验这个小概事件是否发生。如果在一次试验中小概事件发生了,我

长行 2164

假设检验-显著性水平

显著性水平α 与 p值

what_how_why2020的博客 1万+

统计学』第三部分:假设检验

1、假设检验和p值

简之的通向技术之路 7588
上一篇: 二叉树
下一篇: 机器学习算法梳理(五):GBDT梯度提升树
程序员椰子橙
博客等级 码龄9年 46粉丝 163原创
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值