方差、标准差、均方差、均方误差、均方根误差详细总结
方差、标准差、均方差、均方误差、均方根误差详细总结
看到网上别的大神总结的都是复制粘贴的,排版很凌乱,特此总结并精美排版一下。
方差
方差是衡量随机变量或一组数据时离散程度的度量。方差用来度量随机变量和其数学期望(即均值)之间的偏离程度。统计中的方差(样本方差)是各个样本数据和平均数之差的平方和的平均数。在许多实际问题中,研究方差即偏离程度有着重要意义。
对于一组随机变量或者统计数据,其期望值(平均数)用E(X)E(X)E(X)表示,即随机变量或统计数据的均值, 方差的公式如下所示(对各个数据与均值的差的平方和再求平均数):
σ2=∑(X−E(X))2N\sigma^{2} =\frac{\sum \left( X-E\left( X\right) \right)^{2} }{N} σ2=N∑(X−E(X))2
σ2\sigma^{2}σ2为总体方差,XXX为变量,E(X)E(X)E(X)为期望值(总体均值),N为总体样数。
注:这个公式描述了随机变量(统计数据)与均值的偏离程度。方差的概念也可以从最小二乘法的角度来进行理解。
标准差
标准差又称均方差,是方差的算数平方根,标准差的公式如下:
σ=∑(X−μ)2N\sigma =\sqrt{\frac{\sum \left( X-\mu \right)^{2} }{N} } σ=N∑(X−μ)2
μ\muμ表示期望,等同上面的E(X)E(X)E(X)。
有了方差为什么还需要标准差?
可以看到标准差的概念是基于方差的,仅仅是求了一个平方根而已。那么为什么要造出标准差这样一个概念呢?
简单来说,方差单位和数据的单位不一致,没法使用,虽然能很好的描述数据与均值的偏离程度,但是处理结果是不符合我们的直观思维的。
而标准差和数据的单位一致,使用起来方便。内在原因就是方差开了一个平方,而标准差通过加了一个根号使得和均值的量纲(单位)保持了一致,在描述一个波动范围时标准差比方差更方便。
注:至于为什么要开平方,参见最小二乘法。
举个例子:一个班级里有60个学生,平均成绩是70分,标准差是9,方差是81,假设成绩服从正态分布,那么我们通过方差不能直观的确定班级学生与均值到底偏离了多少分,通过标准差我们就很直观的得到学生成绩分布在[61,79]范围的概率为68%,即约等于下图中的34.2%*2
额外说明:一个标准差约为 68%(平均值-标准差,平均值+标准差),两个标准差约为95%(平均值-2倍标准差,平均值+2倍标准差), 三个标准差约为99%。它反映组内个体间的离散程度。
为什么正态分布中要用到标准差,就是因为这个概念可以很好的表示波动范围。
均方误差(MSE)
均方误差是各数据偏离真实值差值的平方和 的平均数,也就是误差平方和的平均数。
MSE(θ^)=E(θ^−θ)2MSE\left( \hat{\theta } \right) =E\left( \hat{\theta } -\theta \right)^{2} MSE(θ^)=E(θ^−θ)2
θ^\hat{\theta}θ^是估计量,θ\thetaθ是实际值。
举个例子:我们要测量房间里的温度,很遗憾我们的温度计精度不高,所以就需要测量5次,得到一组数据[x1,x2,x3,x4,x5],假设温度的真实值是xxx,数据与真实值的误差e=x−xie=x-x_ie=x−xi。
那么均方误差为MSE=∑(x−xi)MSE=\sum(x-x_i)MSE=∑(x−xi) 。
均方根误差
均方误差的开方叫均方根误差,均方根误差才和标准差形式上接近。
总的来说,均方差(标准差)是数据序列与均值的关系,而均方根误差是数据序列与真实值之间的关系。因此,标准差是用来衡量一组数自身的离散程度,而均方根误差是用来衡量观测值同真值之间的偏差,它们的研究对象和研究目的不同,但是计算过程类似。
总结
均方差=标准差
方差是各数据偏离平均值差值的平方和的平均数
均方误差(MSE)是各数据偏离真实值 差值的平方和的平均数
方差是平均值,均方误差是真实值
总的来说,方差是数据序列与均值的关系,而均方误差是数据序列与真实值之间的关系,所以我们要注意区分 真实值和均值 到区别。
参考文章:https://zhuanlan.zhihu.com/p/83410946、https://blog.csdn.net/zengxiantao1994/article/details/77855644/
方差、标准差、均方差、均方误差、均方根误差详细总结相关推荐
- MATLAB的var与std函数 与 均值,方差,标准差,均方差,均分误差
从定义上来讲,(样本)均值,方差,标准差,均方差,均分误差分别为: 均值: 方差: 标准差: 均方差=标准差 均方误差: matlab中的var函数和std函数用来计算方差 var函数计算使用的公式为 ...
- 【误差】方差、标准差、均方误差和均方根误差的区别总结
文章目录 来源 方差 方差与标准差 均方差.均方误差.均方根误差 均方根值 来源 https://blog.csdn.net/zengxiantao1994/article/details/77855 ...
- 均方误差、平方差、方差、均方差
均方误差.平方差.方差.均方差.协方差 一,MSE(均方误差)(Mean Square Error) 均方误差也叫方法损失函数或者最小二乘法 作为机器学习中常常用于损失函数的方法,均方误差频繁的出现在 ...
- 均方距离计算公式_Excel2013中通过公式计算方差与均方差来反映数据的偏移程度...
说起方差.均方差,可能还要回想一下,毕竟那是很早以前接触的(初中数学里面就有的).方差(英文Variance)用来度量随机变量和其数学期望(即均值)之间的偏离程度,多用于零件测绘行业.均方差也叫标准差 ...
- 概率笔记8——方差、均方差和协方差
除了数学期望外,方差.均方差.协方差也是重要的数字特征. 方差 方差的代数意义很简单,两个数的方差就是两个数差值的平方,作为衡量实际问题的数字特征,方差有代表了问题的波动性. 方差的意义 甲.乙二人是 ...
- 统计学基础之:均值-中位数-众数-极差-中程数-方差-标准差-变异系数
转载自:http://blog.sina.com.cn/s/blog_62ded7bf0101aqba.html 本文大纲: 数据挖掘分析&算法前奏之data exploration做什么 基 ...
- 2.13 描述性统计(平均数,中位数,中数,数据的离散度(极差,平均绝对偏差,方差标准差))...
统计分析包括描述统计和推断统计两个部分. 对已有的数据整理,计算数据指标,平均数,中位数,中数,数据的离散度(极差,平均绝对偏差,方差标准差)是最常用的技术手段,也是最容易的. # hanbb # c ...
- 均值-中位数-众数-极差-中程数-方差-标准差-变异系数
一.数据挖掘&算法前奏之data exploration做什么 一个数字序列,如何通过简单的统计指标,直接&直观地描述这个数字序列的一些基本属性,是数据处理与理解的刚需.做数据挖掘和机 ...
- 【问题记录】均值-方差-标准差 计算器(已解决)
问题记录 在Freecodecamp上做[均值-方差-标准差 计算器]这个项目时,测试时出现如下报错:unsupported operand type(s) for -: 'dict' and 'di ...
最新文章
- (转)Lucene.NET 使用
- 【 MATLAB 】ppval 函数介绍(评估分段多项式)
- LeetCode 75. 颜色分类(Sort Colors)
- 微信小程序Java登录流程(ssm实现具体功能和问题解决方案)
- java相同数组拼接_java遍历数组并重新拼接数组里的元素
- Unix原理与应用学习笔记----第五章 普通文件3
- mpvue 从零开始 女友使用 3 rpx 适应大小
- Jupyter-Notebook插入公式
- Redis 处理客户端连接的一些内部实现机制
- 面试官问你Java内存区域你用new创建对象来解释
- [转]win7-64位系统添加access的ODBC数据源 看不到其它数据源的问题
- Redis缓存穿透、缓存雪崩和缓存击穿理解
- Raphael学习笔记(4)--绘图(路径【贝塞尔曲线】)
- 前后端分离的思考与实践(四)
- gimp 抠图_GIMP入门教程2——利用蒙版抠图.pdf
- GB2312、GBK、UTF-8 如何转换
- 人工智能 - 人脸合成 (腾讯AI开放平台)
- 深圳名校最新出炉 学校学区房房价飙升-查查吧深圳学区房地图
- CentOS-8 dnf 前端工具学习笔记
- 雷军博客分享-日本的电饭煲到底好在哪?