正态性检验方法汇总

2024-03-09 04:44
文章标签 方法 汇总 检验 正态性

本文主要是介绍正态性检验方法汇总,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

🍉CSDN小墨&晓末:https://blog.csdn.net/jd1813346972

   个人介绍: 研一|统计学|干货分享
         擅长Python、Matlab、R等主流编程软件
         累计十余项国家级比赛奖项,参与研究经费10w、40w级横向

文章目录

  • 1 图示法
  • 2 偏度、峰度检验法
  • 3 非参数检验方法
  • 4 主要R包及代码

该篇文章主要介绍了统计检验中正态性检验的常用方法理论,包括图示法、偏度/峰度检验法、非参数检验方法,同时附相关R语言程序进行正态性检验的常用函数。

1 图示法

   ①P-P图

   以样本的累计频率作为横坐标,以按照正态分布计算的相应累计概率纵坐标,以样本值表现为直角坐标系的散点。如果数据服从正态分布,则样本点应围绕第一象限的对角线分布。

   ②Q-Q图

   以样本的分位数作为横坐标,以按照正态分布计算的相应累计概率作为纵坐标,把样本表现为直角坐标系的散点。如果数据服从正态分布,则样本点应围绕第一象限的对角线分布。

​    ③直方图

   判断样本直方图是否以钟型分布,同时可以选择输出正态性曲线。

   ④箱线图

   通过观察矩形位置和中位数,若矩形位于中间位置,且中位数位于矩形的中间位置,则分布较为均匀,否则是偏态数据。

   ⑤茎叶图

   通过观察图形的分布状态,是否对称分布。

2 偏度、峰度检验法

  ①偏度、峰度系数分布性质

  样本k阶中心距:

b k = 1 n − 1 ∑ i = 1 n ( x i − x ˉ ) k b_k=\frac{1}{n-1}\sum_{i=1}^n (x_i-\bar{x})^k bk=n11i=1n(xixˉ)k

  样本偏度系数:

r 1 = b 3 b 2 2 3 r_1=\frac{b_3}{b_2^{\frac{2}{3}}} r1=b232b3

  该系数用于检验样本对称性,当 r 1 = 0 r_1=0 r1=0时,分布是对称的;当 r 1 > 0 r_1>0 r1>0时,呈正偏态;当 r 1 < 0 r_1<0 r1<0时,呈负偏态。

  样本峰度系数:

r 1 = b 4 b 2 2 − 3 r_1=\frac{b_4}{b_2^2}-3 r1=b22b43

  该系数用于检验样本峰态,当 r 2 = 0 r_2=0 r2=0时,分布是正态分布;当 r 2 > 0 r_2>0 r2>0时,呈尖峰分布;当 r 2 < 0 r_2<0 r2<0时,呈扁平分布。

  考虑原假设 H 0 : F ( x ) H_0:F(x) H0:F(x)服从正态分布:备择假设 H 1 : F ( x ) H_1:F(x) H1:F(x)不服从正态分布。

  当原假设为真时,检验统计量:

r 1 6 n ∼ N ( 0 , 1 ) \frac{r_1}{\sqrt{\frac{6}{n}}}~\sim N(0,1) n6 r1 N(0,1) r 2 24 n ∼ N ( 0 , 1 ) \frac{r_2}{\sqrt{\frac{24}{n}}}~\sim N(0,1) n24 r2 N(0,1)

  在显著性水平为 α \alpha α时,若满足 ∣ r 1 6 / n ∣ > Z 1 − α / 2 |\frac{r_1}{\sqrt{6/n}}|>Z_{1-\alpha/2} 6/n r1>Z1α/2 ∣ r 2 24 / n ∣ > Z 1 − α / 2 |\frac{r_2}{\sqrt{24/n}}|>Z_{1-\alpha/2} 24/n r2>Z1α/2,则拒绝原假设。

  ②偏度、峰度联合分布检验法(Jarque-Bera检验)

  检验统计量:

J B = r 1 2 6 / n + ( r 2 − 3 ) 24 / n ∼ χ ( 2 ) JB=\frac{r_1^2}{6/n}+\frac{(r_2-3)}{24/n}~\sim \chi(2) JB=6/nr12+24/n(r23) χ(2)

  当JB统计量的P值小于显著性水平 α \alpha α时,则拒绝正态性分布的原假设。

3 非参数检验方法

  ①Kolmogorov-Smirnor检验(KS)

  KS检验基于经验分布函数,该检验用大样本近似。该检验方法为比较一个频率分布f(x)与理论分布g(x)或者两个观测值分布的检验方法。其原假设 H 0 H_0 H0两个数据分布一致或者数据符合理论分布。统计量:

D n = s u p x ∣ F n ( x ) − F ( x ) ∣ D_n=\underset{x}{sup}|F_n(x)-F(x)| Dn=xsupFn(x)F(x)

  当实际观测值 D n > D ( n , α ) D_n>D(n,\alpha) Dn>D(n,α)则拒绝 H 0 H_0 H0,否则则接受 H 0 H_0 H0假设。

  需要注意的是样本数据如果有结点(及是重复的数据),则无法计算准确的P值。

  ②Lilliefors检验(K-S检验的修正)

  当总体均值和方差未知时,用样本的均值和方差代替后,再用K-S检验法。

原假设 H 0 : F ( x ) 服从正态分布 ; 备择假设 H 1 : F ( x ) 不服从正态分布。 原假设H_0:F(x)服从正态分布;备择假设H1:F(x)不服从正态分布。 原假设H0:F(x)服从正态分布;备择假设H1F(x)不服从正态分布。

  ③Shapiro-Wilk检验(Shapiro)

  W 检验全称 Shapiro-Wilk 检验,是一种基于相关性的算法。计算可得到一个相关系数,它越接近 1 就越表明数据和正态分布拟合得越好。

  W检验统计量:

W = ( ∑ i = 1 n a i x i ) 2 ∑ i = 1 n ( x i − x ˉ ) 2 W=\frac{(\sum_{i=1}^na_ix_i)^2}{\sum_{i=1}^n(x_i-\bar{x})^2} W=i=1n(xixˉ)2(i=1naixi)2

  其中 x ( x 1 ) < x ( x 2 ) < … < x ( n ) x_{(x_1)}<x_{(x_2)<\dots<x_(n)} x(x1)<x(x2)<x(n)

( a 1 , a 2 , … , a n ) = m T V − 1 ( m T V − 1 V − 1 m T ) 1 2 (a_1,a_2,\dots,a_n)=\frac{m^TV^{-1}}{(m^TV^{-1}V^{-1}m^T)^{\frac{1}{2}}} (a1,a2,,an)=(mTV1V1mT)21mTV1;

m = ( m 1 , m 2 , … , m n ) m=(m_1,m_2,\dots,m_n) m=(m1,m2,,mn)是样本顺序统计量的样本均值,V是样本。

  若 W > W α W>W_{\alpha} W>Wα,则接受正态性假设。

  ④ χ 2 \chi^2 χ2拟合优度检验

  检验统计量:

χ 2 = ∑ i = 1 k ( f i − n p i ) 2 n p i ∼ χ 2 ( k − 1 ) \chi ^2=\sum_{i=1}^k\frac{(f_i-np_i)^2}{np_i} \sim \chi ^2(k-1) χ2=i=1knpi(finpi)2χ2(k1)

χ 2 = ∑ i = 1 k ( f i − n p i ^ ) 2 n p i ^ ∼ χ 2 ( k − r − 1 ) \chi ^2=\sum_{i=1}^k\frac{(f_i-n\hat{p_i})^2}{n\hat{p_i}} \sim \chi ^2(k-r-1) χ2=i=1knpi^(finpi^)2χ2(kr1)

  若r为被待估参数。

  若服从正态分布, χ 2 \chi ^2 χ2应较小,其中p值大于显著性水平 α \alpha α时,拒绝原假设。

  ⑤达戈斯提诺(D′Agostino)法

  即D检验,1971提出,正态性D检验该方法效率高,是比较精确的正态检验法。

  ⑥AD检验

  ⑦CVM检验

4 主要R包及代码

  ①ks.test()

  例如零假设为N(15,0.2),则ks.test(x,“pnorm”,15,0.2)。如果不是正态分布,还可以选"pexp", "pgamma"等。
   ②shapiro.test()

  可以进行关于正态分布的Shapiro-Wilk检验。
  ③nortest包

lillie.test()可以实行更精确的Kolmogorov-Smirnov检验。
ad.test()进行Anderson-Darling正态性检验。
cvm.test()进行Cramer-von Mises正态性检验。
pearson.test()进行Pearson卡方正态性检验。
sf.test()进行Shapiro-Francia正态性检验。

  ④fBasics包

normalTest()进行Kolmogorov-Smirnov正态性检验。
ksnormTest()进行Kolmogorov-Smirnov正态性检验。
shapiroTest()进行Shapiro-Wilk's正态检验。
jarqueberaTest()进行jarque-Bera正态性检验。
dagoTest进行D'Agostino正态性检验。
gofnorm采用13种方法进行检验,并输出结果。

这篇关于正态性检验方法汇总的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/789546

相关文章

python获取指定名字的程序的文件路径的两种方法

《python获取指定名字的程序的文件路径的两种方法》本文主要介绍了python获取指定名字的程序的文件路径的两种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要... 最近在做项目,需要用到给定一个程序名字就可以自动获取到这个程序在Windows系统下的绝对路径,以下

JavaScript中的高级调试方法全攻略指南

《JavaScript中的高级调试方法全攻略指南》什么是高级JavaScript调试技巧,它比console.log有何优势,如何使用断点调试定位问题,通过本文,我们将深入解答这些问题,带您从理论到实... 目录观点与案例结合观点1观点2观点3观点4观点5高级调试技巧详解实战案例断点调试:定位变量错误性能分

Python中 try / except / else / finally 异常处理方法详解

《Python中try/except/else/finally异常处理方法详解》:本文主要介绍Python中try/except/else/finally异常处理方法的相关资料,涵... 目录1. 基本结构2. 各部分的作用tryexceptelsefinally3. 执行流程总结4. 常见用法(1)多个e

JavaScript中比较两个数组是否有相同元素(交集)的三种常用方法

《JavaScript中比较两个数组是否有相同元素(交集)的三种常用方法》:本文主要介绍JavaScript中比较两个数组是否有相同元素(交集)的三种常用方法,每种方法结合实例代码给大家介绍的非常... 目录引言:为什么"相等"判断如此重要?方法1:使用some()+includes()(适合小数组)方法2

504 Gateway Timeout网关超时的根源及完美解决方法

《504GatewayTimeout网关超时的根源及完美解决方法》在日常开发和运维过程中,504GatewayTimeout错误是常见的网络问题之一,尤其是在使用反向代理(如Nginx)或... 目录引言为什么会出现 504 错误?1. 探索 504 Gateway Timeout 错误的根源 1.1 后端

MySQL 表空却 ibd 文件过大的问题及解决方法

《MySQL表空却ibd文件过大的问题及解决方法》本文给大家介绍MySQL表空却ibd文件过大的问题及解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考... 目录一、问题背景:表空却 “吃满” 磁盘的怪事二、问题复现:一步步编程还原异常场景1. 准备测试源表与数据

python 线程池顺序执行的方法实现

《python线程池顺序执行的方法实现》在Python中,线程池默认是并发执行任务的,但若需要实现任务的顺序执行,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋... 目录方案一:强制单线程(伪顺序执行)方案二:按提交顺序获取结果方案三:任务间依赖控制方案四:队列顺序消

SpringBoot通过main方法启动web项目实践

《SpringBoot通过main方法启动web项目实践》SpringBoot通过SpringApplication.run()启动Web项目,自动推断应用类型,加载初始化器与监听器,配置Spring... 目录1. 启动入口:SpringApplication.run()2. SpringApplicat

使用Java读取本地文件并转换为MultipartFile对象的方法

《使用Java读取本地文件并转换为MultipartFile对象的方法》在许多JavaWeb应用中,我们经常会遇到将本地文件上传至服务器或其他系统的需求,在这种场景下,MultipartFile对象非... 目录1. 基本需求2. 自定义 MultipartFile 类3. 实现代码4. 代码解析5. 自定

Python文本相似度计算的方法大全

《Python文本相似度计算的方法大全》文本相似度是指两个文本在内容、结构或语义上的相近程度,通常用0到1之间的数值表示,0表示完全不同,1表示完全相同,本文将深入解析多种文本相似度计算方法,帮助您选... 目录前言什么是文本相似度?1. Levenshtein 距离(编辑距离)核心公式实现示例2. Jac