统计学

参数估计之点估计(矩估计,最大似然估计) 详解含推导

1.何为点估计

在了解点估计之前,我们先介绍一下估计量与估计值的概念

1.1估计量与估计值

参数估计

就是用样本统计量去估计总体的参数,如用样本均值 x⃗\vec xx 去估计总体均值 μ ,用样本比例 p 估计总体比例 π ,样本方差 s2s^2s2 估计总体方差 δ2δ^2δ2 .
现在我们将总体参数笼统的称为 θ ,而用于估计总体参数 θ 的统计量我们称为 θ^ ,参数估计的实际含义就是如何用 θ^ 来表示 θ

估计量

估计参数时计算出来的统计量的具体值: θ^

1.2点估计

点估计,顾名思义就是用 θ^的某个取值作为总体参数 θ 的估计值
下面便介绍点估计的两种方法: 矩估计和最大似然估计

2.矩估计

2.1概念解析

ps: 如果想直接记做题结论的可以跳过这一步
也许第一眼看上去十分复杂,其实他们代表的含义十分简单
这里的 μ 表示的是根据分布计算出的期望它就是我们之前提到的 θ
这里的 A 表示的是根据实际情况,也就是样本数据计算出的均值 ,也就是我们用来估计的 θ^
下面我们便结合实际的例子来讲解

2.2案例分析

这里的案例分为2种情况:

分布情况属于我们已知的五大分布
分布情况未知,但是给出了密度函数

注:五大分布的期望方差表已放在文末

解题步骤

1.判断分布
2.构造方程(有几个参数就构造几个方程)
3.计算结果

矩估计,例题一

分析
显然,这道题属于已知分布函数的类型,并且只有一个参数

矩估计,例题二!

分析
显然,这道题属于已知分布函数的类型,并且有2个参数

矩估计,例题三

分析
显然,这道题属于未知分布函数但知道密度函数的类型,并且有1个参数

3.最大似然估计

3.1概念解析

下面两张图可以简单的看看过,如果真的想了解似然估计的话可以阅读一下下面的文章
这里推荐一篇之前看到过的非常好的文章
读懂最大似然估计
简单的概括来说,最大似然估计就是利用求导找出概率的最大值,来作为 θ^ 估计 θ

3.2案例分析

这里的案例同样分为2种情况:

分布情况属于我们已知的五大分布
分布情况未知,但是给出了密度函数

注:五大分布的期望方差表已放在文末

解题步骤

1.写似然函数
2.取对数
3.求导,令导数=0
4.得出结果,如果求估计值就小写,求估计量就大写

最大似然估计,例题一

解答

最大似然估计,例题二

最大似然估计,例题三

这种情况是已知密度函数的,解题过程仍类似

附页:几种常见的抽样分布

参数估计之点估计(矩估计,最大似然估计) 详解+例题相关推荐

四.卡尔曼滤波器(EKF)开发实践之四: ROS系统位姿估计包robot_pose_ekf详解
本系列文章主要介绍如何在工程实践中使用卡尔曼滤波器,分七个小节介绍: 一.卡尔曼滤波器开发实践之一: 五大公式二.卡尔曼滤波器开发实践之二: 一个简单的位置估计卡尔曼滤波器三.卡尔曼滤波器(EK ...
孙子兵法之36计详解
孙子兵法之36计详解第一套胜战计第一计瞒天过海备周而意怠,常见则不疑,阴在阳之内,不在阳之对.太阳,太阴. 译:认为准备万分周到,就容易松劲:平时看惯了的,就往往不在怀疑了,秘计隐藏在暴露的 ...
极大似然估计详解，写的太好了！
极大似然估计以前多次接触过极大似然估计,但一直都不太明白到底什么原理,最近在看贝叶斯分类,对极大似然估计有了新的认识,总结如下: 贝叶斯决策首先来看贝叶斯分类,我们都知道经典的贝叶斯公式: 其中: ...
贝叶斯公式和极大似然估计详解
文章目录一.贝叶斯决策二.极大似然估计的引出三.极大似然估计四.极大似然函数的求解一.贝叶斯决策首先来看贝叶斯分类,我们都知道经典的贝叶斯公式: 我们来看一个直观的例子:已知:在夏季,某公 ...
空间复杂度（超详解+例题）
全文目录引言空间复杂度例题 test1 test2(冒泡排序) test3(求阶乘) test4(斐波那契数列) 总结引言在上一篇文章中,我们提到判断一个算法的好坏的标准是时间复杂度与空间复 ...
最长上升子序列（LIS）/最长不上升子序列问题算法详解+例题（树状数组/二分优化，看不懂你来打我）
目录最长上升子序列一.朴素做法O(2n)O(2^n)O(2n) 二.优化做法O(nlogn)O(nlogn)O(nlogn) 三.例题引入:P1020 导弹拦截(求最长上升子序列和最长不上升子序列 ...
【树形DP】树形DP入门详解+例题剖析
树形DP 树形DP准确的说是一种DP的思想,将DP建立在树状结构的基础上.整体的思路大致就是用树形的结构存储数据. 要学树形DP之前肯定是要先学会树和图的呀,至少先学会链式前向星,不会的话可以看一下我 ...
极大似然估计、拉普拉斯平滑定理、M-估计详解
注意: (1) 原载地址:http://blog.csdn.net/xinhanggebuguake/article/details/8765536 (2) 英文原文链接:http://www ...
机器学习之极大似然估计详解
文章目录前言极大似然原理极大似然估计极大似然估计的应用及推导推导联合概率是什么求极大似然估计值$\hat\theta$的一般步骤前言极大似然估计在机器学习中很多模型都会用到,理解了极 ...

参数估计之点估计(矩估计,最大似然估计) 详解+例题

统计学

参数估计之点估计(矩估计,最大似然估计) 详解含推导

1.何为点估计

1.1估计量与估计值

参数估计

估计量

1.2点估计

2.矩估计

2.1概念解析

2.2案例分析

解题步骤

矩估计,例题一

矩估计,例题二!

矩估计,例题三

3.最大似然估计

3.1概念解析

3.2案例分析

解题步骤

最大似然估计,例题一

最大似然估计,例题二

最大似然估计,例题三

附页:几种常见的抽样分布

参数估计之点估计(矩估计,最大似然估计) 详解+例题相关推荐

最新文章

热门文章