谈均值、方差、标准差、协方差的概念及意义
一、统计学的基本概念
统计学里最基本的概念就是样本的均值、方差、标准差。首先,我们给定一个含有n个样本的集合,下面给出这些概念的公式描述:
均值:
标准差:
方差:
均值描述的是样本集合的中间点,它告诉我们的信息是有限的,而标准差给我们描述的是样本集合的各个样本点到均值的距离之平均。
以这两个集合为例,[0, 8, 12, 20]和[8, 9, 11, 12],两个集合的均值都是10,但显然两个集合的差别是很大的,计算两者的标准差,前者是8.3后者是1.8,显然后者较为集中,故其标准差小一些,标准差描述的就是这种“散布度”。之所以除以n-1而不是n,是因为这样能使我们以较小的样本集更好地逼近总体的标准差,即统计上所谓的“无偏估计”。而方差则仅仅是标准差的平方。
二、为什么需要协方差
标准差和方差一般是用来描述一维数据的,但现实生活中我们常常会遇到含有多维数据的数据集,最简单的是大家上学时免不了要统计多个学科的考试成绩。面对这样的数据集,我们当然可以按照每一维独立的计算其方差,但是通常我们还想了解更多,比如,一个男孩子的猥琐程度跟他受女孩子的欢迎程度是否存在一些联系。协方差就是这样一种用来度量两个随机变量关系的统计量,我们可以仿照方差的定义:
来度量各个维度偏离其均值的程度,协方差可以这样来定义:
协方差的结果有什么意义呢?如果结果为正值,则说明两者是正相关的(从协方差可以引出“相关系数”的定义),也就是说一个人越猥琐越受女孩欢迎。如果结果为负值, 就说明两者是负相关,越猥琐女孩子越讨厌。如果为0,则两者之间没有关系,猥琐不猥琐和女孩子喜不喜欢之间没有关联,就是统计上说的“相互独立”。
从协方差的定义上我们也可以看出一些显而易见的性质,如:
三、协方差矩阵
前面提到的猥琐和受欢迎的问题是典型的二维问题,而协方差也只能处理二维问题,那维数多了自然就需要计算多个协方差,比如n维的数据集就需要计算个协方差,那自然而然我们会想到使用矩阵来组织这些数据。给出协方差矩阵的定义:
这个定义还是很容易理解的,我们可以举一个三维的例子,假设数据集有三个维度,则协方差矩阵为:
可见,协方差矩阵是一个对称的矩阵,而且对角线是各个维度的方差。
四、Matlab协方差实战
必须要明确一点,协方差矩阵计算的是不同维度之间的协方差,而不是不同样本之间的。以下的演示将使用Matlab,为了说明计算原理,不直接调用Matlab的cov函数:
首先,随机生成一个10*3维的整数矩阵作为样本集,10为样本的个数,3为样本的维数。
图 1 使用Matlab生成样本集
根据公式,计算协方差需要计算均值,前面特别强调了,协方差矩阵是计算不同维度之间的协方差,要时刻牢记这一点。样本矩阵的每行是一个样本,每列是一个维度,因此我们要按列计算均值。为了描述方便,我们先将三个维度的数据分别赋值:
图 2 将三个维度的数据分别赋值
计算dim1与dim2,dim1与dim3,dim2与dim3的协方差:
图 3 计算三个协方差
协方差矩阵的对角线上的元素就是各个维度的方差,下面我们依次计算这些方差:
图 4 计算对角线上的方差
这样,我们就得到了计算协方差矩阵所需要的所有数据,可以调用Matlab的cov函数直接得到协方差矩阵:
图 5 使用Matlab的cov函数直接计算样本的协方差矩阵
计算的结果,和之前的数据填入矩阵后的结果完全相同。
五、总结
理解协方差矩阵的关键就在于牢记它的计算是不同维度之间的协方差,而不是不同样本之间。拿到一个样本矩阵,最先要明确的就是一行是一个样本还是一个维度,心中明确整个计算过程就会顺流而下,这么一来就不会迷茫了。
谈均值、方差、标准差、协方差的概念及意义相关推荐
- 浅谈均值、方差、标准差、协方差的概念及意义
浅谈均值.方差.标准差.协方差的概念及意义 一.统计学的基本概念 统计学里最基本的概念就是样本的均值.方差.标准差.首先,我们给定一个含有n个样本的集合,下面给出这些概念的公式描述: 均值: 标准差: ...
- MATLAB的var与std函数 与 均值,方差,标准差,均方差,均分误差
从定义上来讲,(样本)均值,方差,标准差,均方差,均分误差分别为: 均值: 方差: 标准差: 均方差=标准差 均方误差: matlab中的var函数和std函数用来计算方差 var函数计算使用的公式为 ...
- 【问题记录】均值-方差-标准差 计算器(已解决)
问题记录 在Freecodecamp上做[均值-方差-标准差 计算器]这个项目时,测试时出现如下报错:unsupported operand type(s) for -: 'dict' and 'di ...
- 均值、方差、标准差、协方差的概念及意义
1.均值和方差 (1)统计学里最基本的概念就是样本的均值.方差.标准差.首先,我们给定一个含有n个样本的集合,下面给出这些概念的公式描述: 均值: 标准差: 方差: (2)均值描述的是样本集
- 求均值方差_协方差,方差,标准差
要深度理解定义!!!要深度理解定义!!!要深度理解定义!!! 协方差,如下定义: 方差如下定义: 标准差就是sqrt(方差) 之前总是有个混淆的点. 故在这里mark一下.(要理解好定义的想表达的深层 ...
- 标准差、方差、协方差三者的表示意义
三者都是统计学中,对于样本的集合描述. 定义公式 标准差: 方差: 协方差: 协方差相关系数: 数学实际含义 方差(Variance):用来度量随机变量和其数学期望(即均值)之间的偏离程度. 标准差: ...
- echarts3.0 markline 最大值 最小值 均值 方差 标准差 包络 正态分布
if (pie == "最大值" || pie == "最小值" || pie == "均值" || pie == "标准差&qu ...
- 数学常识--标准差、方差、协方差三者的表示意义
三者都是统计学中,对于样本的集合描述. 一.定义公式 1.标准差: 2.方差: 3.协方差: 4.协方差相关系数: 二.数学实际含义 1.方差(Variance):用来度量随机变量和其数 ...
- 数理统计-方差标准差协方差相关系数
Q1. 方差.标准差.协方差.有什么区别 方差(样本方差)是每个样本值与全体样本值的平均数之差的平方值的平均数,描述样本偏离均值的平均程度或者说是样本的分散程度: 标准差是总体各单位标准值与其平均数离 ...
最新文章
- 利用OpenCV实现抖音最强变脸术 | CSDN原力计划
- 安徽省二级c语言笔试样题,安徽省二级C语言程序设计笔试样题1
- hello程序的运行过程-从计算机系统角度
- 数字图像处理--图像梯度算子的本质
- 关于Oracle RAC调整网卡MTU值的问题
- c创建python虚拟机_cpython大致数据结构实现笔记
- springboot mysql事物_springboot如何开启数据库事务
- 2021 ICPC Asia Jinan Regional Contest-J Determinant(取模高斯消元)
- 设计递归算法,删除不带头结点的单链表L中所有值为X的结点
- html5用户注册页面代码,HTML5注册页面示例代码_html5教程技巧
- Ubuntu 查看IP、网关及DNS
- 笔记-CTA认证需要的操作, 应用可卸载, 系统还原后应用重装--Camera模块
- crt和zoc7的快捷键记录
- 处理win10系统自动休眠bug
- 企查查app新增企业数据抓取
- 逗号表达式--------问号表达式
- 【爬虫】每天定时爬取网页小故事并发送至指定邮箱
- Unity中实现文件加密
- 操作系统安全05-特殊网站的搭建(一)
- 【历史上的今天】2 月 14 日:第一台通用计算机面世;IBM 诞生;Julia 公开发布