随机过程(基本概念、平稳随机过程)
大三上学习了随机过程(实际听不懂就去看了简化版的随机信号),感觉一些概念性的东西比较多,因此这里进行一个简单总结。
文章目录
- (1)随机过程的基本概念
- 1.对随机过程的理解
- 2.随机过程的概率分布
- 3.随机过程的矩函数
- 4.随机过程的特征函数
- (2)平稳随机过程
- 1.平稳的定义
- 2.严格平稳过程
- 3.广义平稳过程
- 4.各态历经过程
- 5.平稳过程相关函数的性质
- 6.相关系数和相关时间
(1)随机过程的基本概念
1.对随机过程的理解
- 我感觉所谓的随机过程实际很类似升维之后的随机变量,但是横坐标是确知的时间 ttt。对每一个时间 ttt 进行切片(降维)都会得到对应的一组随机变量,而针对每一个确定的时间 ttt 进行观测都会得到一个确知的随机变量的取值,所有的 ttt 对应的这个取值就会构成一个确定的时间函数(样本函数)。
2.随机过程的概率分布
- 一维分布函数:
F1(x1,t1)=P{X(t1)≤x1}F_1(x_1,t_1) = P\{ X(t_1) \le x_1\}F1(x1,t1)=P{X(t1)≤x1}
就像在理解中说的,在这里相当于每给定一个 t1t_1t1,二维的这样的随机过程就转换成一维的随机变量,所以这样的分布函数和在概率论中学到的分布函数在形式上是完全一样的。 - 一维概率密度:
p1(x1,t1)=∂F1(x1,t1)∂x1p_1(x_1,t_1) = \frac{\partial F_1(x_1,t_1)}{\partial x_1}p1(x1,t1)=∂x1∂F1(x1,t1)
一般省略脚注写作 p(x,t)p(x,t)p(x,t) 。 - nnn 维分布函数与概率密度函数
分布函数: Fn(x1,x2,⋯,xn,t1,t2,⋯,tn)=P{X(t1)≤x1,X(t2)≤x2,⋯X(tn)≤xn}F_n(x_1,x_2,\dotsb ,x_n,t_1,t_2,\dotsb,t_n) = P\{ X(t_1) \le x_1,X(t_2) \le x_2, \dotsb X(t_n) \le x_n \}Fn(x1,x2,⋯,xn,t1,t2,⋯,tn)=P{X(t1)≤x1,X(t2)≤x2,⋯X(tn)≤xn}
概率密度函数:pn(x1,x2,⋯,xn,t1,t2,⋯,tn)=∂nFn(x1,x2,⋯,xn,t1,t2,⋯,tn)∂x1∂x1⋯∂xnp_n(x_1,x_2,\dotsb ,x_n,t_1,t_2,\dotsb,t_n) = \frac{\partial^n F_n(x_1,x_2,\dotsb ,x_n,t_1,t_2,\dotsb,t_n)}{\partial x_1\partial x_1 \dotsb \partial x_n}pn(x1,x2,⋯,xn,t1,t2,⋯,tn)=∂x1∂x1⋯∂xn∂nFn(x1,x2,⋯,xn,t1,t2,⋯,tn)
注意这里如果 X(t1),X(t2),⋯,X(tn)X(t_1),X(t_2),\dotsb,X(t_n)X(t1),X(t2),⋯,X(tn) 统计独立,上面的概率密度函数就可以直接乘开 p(x1,x2,⋯,xn,t1,t2,⋯,tn)=p(x1,t1)p(x2,t2)⋯p(xn,tn)p(x_1,x_2,\dotsb ,x_n,t_1,t_2,\dotsb,t_n) = p(x_1,t_1)p(x_2,t_2)\dotsb p(x_n,t_n)p(x1,x2,⋯,xn,t1,t2,⋯,tn)=p(x1,t1)p(x2,t2)⋯p(xn,tn)
3.随机过程的矩函数
- 数学期望(统计均值,一阶原点矩)
E[X(t)]=∫−∞∞xp(x,t)dx=mX(t)E[X(t)] = \int _{-\infin}^{\infin} xp(x,t)dx = m_X(t)E[X(t)]=∫−∞∞xp(x,t)dx=mX(t)
反映的是在 ttt 给定条件下的样本函数的平均取值。 - 方差 (二阶中心矩)
D[X(t)]=E{[X(t)−mX(t)]2}=∫−∞∞(x−mX(t))p(x,t)dx=σX2(t)\begin{matrix} &D[X(t)]=E\{[X(t) - m_X(t)]^2 \}\\ ~~\\ &=\displaystyle\int _{-\infin}^{\infin} (x-m_X(t))p(x,t)dx=\sigma^2_X(t) \end{matrix} D[X(t)]=E{[X(t)−mX(t)]2}=∫−∞∞(x−mX(t))p(x,t)dx=σX2(t)- 标准差实际上就是方差的平方根,即 σX(t)\sigma_X(t)σX(t)。
- 反映的是在 ttt 给定条件下的样本函数和样本函数平均取值之间的偏差。
- 自相关函数(相关函数,二阶混合原点矩)
RX(t1,t2)=E[X(t1)X(t2)]=∫−∞∞∫−∞∞x1x2p2(x1,x2;t1,t2)dx1dx2R_X(t_1,t_2) = E[X(t_1)X(t_2)]=\int _{-\infin}^{\infin}\int _{-\infin}^{\infin}x_1x_2p_2(x_1,x_2;t_1,t_2)dx_1dx_2RX(t1,t2)=E[X(t1)X(t2)]=∫−∞∞∫−∞∞x1x2p2(x1,x2;t1,t2)dx1dx2- 反映过程 X(t)X(t)X(t) 在任意两时刻的取值之间的平均关联程度。
- 当 t1=t2=tt_1=t_2=tt1=t2=t 时,实际上自相关函数就转化成均方值(E[X2(t)]E[X^2(t)]E[X2(t)])。
- 协方差函数
CX(t1,t2)=E[X(t1)−mX(t1)][X(t2)−mX(t2)]=∫−∞∞∫−∞∞[x1−mX(t1)][x2−mX(t2)]p2(x1,x2;t1,t2)dx1dx2\begin{matrix} &C_X(t_1,t_2) = E[X(t_1)-m_X(t_1)][X(t_2)-m_X(t_2)]\\ ~~\\ &=\displaystyle\int _{-\infin}^{\infin}\int _{-\infin}^{\infin}[x_1-m_X(t_1)][x_2-m_X(t_2)]p_2(x_1,x_2;t_1,t_2)dx_1dx_2\end{matrix} CX(t1,t2)=E[X(t1)−mX(t1)][X(t2)−mX(t2)]=∫−∞∞∫−∞∞[x1−mX(t1)][x2−mX(t2)]p2(x1,x2;t1,t2)dx1dx2- 反映过程 X(t)X(t)X(t) 在任意两时刻的起伏值之间的平均关联程度。
- 实际上这里感觉类似于有一种对速度的描述,既要从 vvv 这个角度对速度进行描述,还要从 aaa 加速度这个角度对速度进行描述,加速度表示的实际上就是速度的起伏变化关系。
- 当 t1=t2=tt_1=t_2=tt1=t2=t 时,实际上协方差就化简成了方差。
- 自相关函数和协方差函数之间的关系:
CX(t1,t2)=RX(t1,t2)−mX(t1)mX(t2)C_X(t_1,t_2) = R_X(t_1,t_2)-m_X(t_1)m_X(t_2)CX(t1,t2)=RX(t1,t2)−mX(t1)mX(t2)
4.随机过程的特征函数
- 特征函数的用途:
这个实际上有点类似于时域和频域之间的一种转化,时域上困难的问题转换到频域上就变得简单许多了。这里的特征函数可以简化概率密度的求解和随机变量数字特征的求解。还要注意一下,特征函数实际上与概率密度函数构成一组傅里叶变换。 - 一维特征函数的定义:
{ΦX(λ,t)=E[ejλX(t)]=∫−∞∞ejλxp(x,t)dxp(x,t)=12π∫−∞∞ΦX(λ,t)e−jλxdλ\left\{ \begin{matrix} &\Phi_X(\lambda,t) = E[e^{j\lambda X(t)}]=\displaystyle\int _{-\infin}^{\infin} e^{j\lambda x} p(x,t)dx\\ &p(x,t) = \dfrac{1}{2\pi}\displaystyle\int _{-\infin}^{\infin} \Phi_X(\lambda,t) e^{-j\lambda x}d\lambda \end{matrix}\right.⎩⎪⎪⎨⎪⎪⎧ΦX(λ,t)=E[ejλX(t)]=∫−∞∞ejλxp(x,t)dxp(x,t)=2π1∫−∞∞ΦX(λ,t)e−jλxdλ - 求原点矩(对特征函数两端求 nnn 阶导):
E[Xn(t)]=∫−∞∞xnp(x,t)dx=j−n[∂n∂λnΦX(λ,t)]λ=0E[X^n(t)] = \int _{-\infin}^{\infin} x^np(x,t)dx=j^{-n}[\frac{\partial^n}{\partial\lambda^n}\Phi_X(\lambda,t)]_{\lambda=0}E[Xn(t)]=∫−∞∞xnp(x,t)dx=j−n[∂λn∂nΦX(λ,t)]λ=0
(2)平稳随机过程
1.平稳的定义
- 实际上是采用平稳的这个定义想办法将随机过程中的时间这个参量进行了弱化,对于严平稳来说一维特性(一维概率密度、均值、方差)都和时间没有关系,二维特向仅与时间差有关(二维概率密度、相关函数、协方差函数)。对于广义平稳来说,均值与时间无关,相关函数仅与时间差有关。
2.严格平稳过程
- 一维特性与时间无关:
p1(x1,t1)=p1(x1),E[X(t)]=mX,D[X(t)]=σX2p_1(x_1,t_1)=p_1(x_1),E[X(t)] = m_X,D[X(t)] = \sigma_X^2p1(x1,t1)=p1(x1),E[X(t)]=mX,D[X(t)]=σX2 - 二维特性仅与时间差相关:
p2(x1,x2;t1,t2)=p2(x1,x2;τ),RX(t1,t2)=RX(τ)CX(t1,t2)=RX(τ)−mX2\begin{matrix} &p_2(x_1,x_2;t_1,t_2)=p_2(x_1,x_2;\tau),R_X(t_1,t_2) = R_X(\tau)\\ ~~\\ &C_X(t_1,t_2) = R_X(\tau) - m_X^2\end{matrix} p2(x1,x2;t1,t2)=p2(x1,x2;τ),RX(t1,t2)=RX(τ)CX(t1,t2)=RX(τ)−mX2
3.广义平稳过程
- 这里比严格平稳过程要宽松很多,广义平稳过程仅要求均值和相关函数的特性。
{E[X(t)]=mXRX(t1,t2)=RX(τ)\left\{ \begin{matrix} &E[X(t)] = m_X\\ &R_X(t_1,t_2) = R_X(\tau) \end{matrix}\right.{E[X(t)]=mXRX(t1,t2)=RX(τ)
4.各态历经过程
- 统计平均
统计平均是在样本轴上来看,这个要求的是在同一时刻进行大量样本的取值再求平均,实际上在操作起来这样是很麻烦的,因为要进行十分多次的重复试验。
E[X(t)]=mXRX(t1,t2)=RX(τ)\begin{matrix} &E[X(t)] = m_X\\ &R_X(t_1,t_2) = R_X(\tau) \end{matrix}E[X(t)]=mXRX(t1,t2)=RX(τ) - 时间平均
时间平均是在时间轴上来看的,这个只要求在众多样本中取出一个函数然后进行积分求平均就可以了,比如对某一样本函数 xi(t)x_i(t)xi(t)
时间均值 <xi(t)>=limT→∞12T∫−TTxi(t)dt<x_i(t)>=\lim_{T\rightarrow\infin}\frac{1}{2T}\displaystyle\int_{-T}^{T}x_i(t)dt<xi(t)>=T→∞lim2T1∫−TTxi(t)dt
时间自相关函数
<xi(t)xi(t+τ)>=limT→∞12T∫−TTxi(t)xi(t+τ)dt<x_i(t)x_i(t+\tau)> = \lim_{T\rightarrow\infin}\frac{1}{2T}\displaystyle\int_{-T}^{T}x_i(t)x_i(t+\tau)dt<xi(t)xi(t+τ)>=T→∞lim2T1∫−TTxi(t)xi(t+τ)dt - 各态历经性(遍历性)
如果 xx 的时间平均和 xx 的统计平均在概率上是相等的,就说 xx 具有遍历性。
比如如果有 <xi(t)>=PE[X(t)]<x_i(t)> \xlongequal{P}E[X(t)]<xi(t)>PE[X(t)]就说均值具有遍历性。 - 遍历过程:
- 定义:均值和相关函数都具有遍历性。
- 理解:实际上遍历性说明了一个样本在足够长的时间内经历了这个随机过程全部的可能状态,因此对于每一个样本都可以作为了解这个随机过程的一个典型,所以直接对时间取平均就可以了。
- 遍历性的充要条件:
- 平稳过程 X(t)X(t)X(t) 的均值 mXm_XmX 具有遍历性的充要条件:
limT→∞12T∫−2T2T(1−∣τ∣2T)CX(τ)dτ=0\lim_{T\rightarrow\infin}\frac{1}{2T}\displaystyle\int_{-2T}^{2T}(1-\frac{|\tau|}{2T})C_X(\tau)d\tau = 0T→∞lim2T1∫−2T2T(1−2T∣τ∣)CX(τ)dτ=0 - 平稳过程 X(t)X(t)X(t) 的相关函数 RX(τ)R_X(\tau)RX(τ) 具有遍历性的充要条件:
limT→∞12T∫−2T2T(1−∣α∣2T)Cϕ(α)dα=0\lim_{T\rightarrow\infin}\frac{1}{2T}\displaystyle\int_{-2T}^{2T}(1-\frac{|\alpha|}{2T})C_{\phi}(\alpha)d\alpha = 0T→∞lim2T1∫−2T2T(1−2T∣α∣)Cϕ(α)dα=0
这里 ϕ(t)=X(t)X(t+τ)\phi(t) = X(t)X(t+\tau)ϕ(t)=X(t)X(t+τ) - 对于零均值平稳正态随机过程 X(t)X(t)X(t)
lim∣τ∣→∞CX(τ)=0\lim_{|\tau|\rightarrow\infin}C_X(\tau) = 0∣τ∣→∞limCX(τ)=0
实际上这个式子想表达的意思是,在两个随机变量相差足够长的时间之后,两个随机变量之间不存在相关性,这样才能完成遍历。
- 平稳过程 X(t)X(t)X(t) 的均值 mXm_XmX 具有遍历性的充要条件:
5.平稳过程相关函数的性质
- 相关函数是时间差的偶函数:RX(τ)=RX(−τ)R_X(\tau) = R_X(-\tau)RX(τ)=RX(−τ)
- 相关函数在 τ=0\tau = 0τ=0 的时刻一定为非负值:RX(0)≥0R_X(0) \ge 0RX(0)≥0
- 相关函数在 τ=0\tau = 0τ=0 的时刻为最大值(就是说自己和自己相关性最高):RX(0)≥∣RX(τ)∣R_X(0)\ge|R_X(\tau)|RX(0)≥∣RX(τ)∣
- 如果平稳随机不含周期分量(在相差时间无限长的时候,两者以均值形式相关):RX(∞)=mX2R_X(\infin) = m_X^2RX(∞)=mX2
- 对周期性随机过程其相关函数也具有周期性:RX(τ)=RX(τ+T)R_X(\tau) = R_X(\tau+T)RX(τ)=RX(τ+T)
- RX(τ)R_X(\tau)RX(τ) 为非负定函数,即对任意数组 t1,t2,⋯,tnt_1,t_2,\dotsb,t_nt1,t2,⋯,tn 和任意函数 f(x)f(x)f(x),均有 ∑i,j=1nRX(ti−tj)f(ti)f(tj)≥0\displaystyle\sum_{i,j=1}^n R_X(t_i-t_j)f(t_i)f(t_j)\ge0i,j=1∑nRX(ti−tj)f(ti)f(tj)≥0
6.相关系数和相关时间
- 相关系数(实际上就是进行了一个归一化处理)
rX(τ)=RX(τ)−RX(∞)RX(0)−RX(∞)=CX(τ)CX(0)=CX(τ)σX2r_X(\tau) = \dfrac{R_X(\tau)-R_X(\infin)}{R_X(0)-R_X(\infin)}=\frac{C_X(\tau)}{C_X(0)}=\dfrac{C_X(\tau)}{\sigma_X^2}rX(τ)=RX(0)−RX(∞)RX(τ)−RX(∞)=CX(0)CX(τ)=σX2CX(τ) - 相关时间:
可以从上面的等式看出来,当 τ→∞\tau\rightarrow\infinτ→∞ 时,rX(τ)→0r_X(\tau)\rightarrow 0rX(τ)→0,但是工程上没有办法实现 ∞\infin∞ 这一概念,因此规定从 rX(τ)=1r_X(\tau) = 1rX(τ)=1 下降到某个很小的数(在这个数之后直接认为不相关)花费的时间为相关时间。下面给出一个衡量相关时间长短的积分式:τ0=∫0∞rX(τ)dτ\tau_0 = \int_0^{\infin}r_X(\tau)d\tauτ0=∫0∞rX(τ)dτ- 相关时间越长表示随机过程的起伏变化越慢。
随机过程(基本概念、平稳随机过程)相关推荐
- Day 4随机过程基本概念 平稳随机过程
一.随机过程基本概念 随机过程是一类随时间作随机变化的过程,它不能用确切的时间函数描述,可以从两个不同的角度来说明:1.是把随机过程看成所有样本函数的集合.2.把随机过程看成是在时间进程中处于不同时刻 ...
- matlab平稳随机过程的功率谱密度,平稳随机过程及功率谱密度.ppt
平稳随机过程及功率谱密度 平稳随机过程的功率谱密度 一.平稳过程的功率谱密度 二.谱密度的性质 三.互谱密度及其性质 * 一.平稳过程的功率谱密度 二.谱密度的性质 三.互谱密度及其性质 假如 x( ...
- matlab平稳随机过程的功率谱密度,平稳随机过程的功率谱密度
<平稳随机过程的功率谱密度>由会员分享,可在线阅读,更多相关<平稳随机过程的功率谱密度(27页珍藏版)>请在人人文库网上搜索. 1.平稳随机过程的功率谱密度,一.平稳过程的功率 ...
- 随机过程基础3--宽平稳随机过程的谱分析
本节关于随机过程的谱分析,当然是针对宽平稳随机过程 1,什么是谱? 将复杂对象分解成几个方面,使得我们可以从几个方面尽可能简单地观察这个复杂对象的某些特征. 例如光谱是按照光的波长分解. 对于随机信号 ...
- 平稳随机过程的严平稳随机过程与宽平稳随机过程区别联系
1.一个宽平稳过程不一定是严平稳过程,一个严平稳过程也不一定宽平稳过程. 例1:X(n)=sinwn,n=0,1,2,-,其中w服从U(0,2π),随机过程{X(n),n=0,1,2,-}是宽平稳过程 ...
- 广义平稳随机过程和狭义平稳随机过程
一.广义平稳随机过程: 1.数学期望与时间无关 2.自相关函数只与时间间隔τ有关 二.狭义平稳随机过程(又称严平稳随机过程): 只有满足以下式子才是狭义平稳随机过程 1.一个狭义平稳过程一定是广义平稳 ...
- 【通信原理】严平稳随机过程 广义平稳随机过程 高斯随机过程
目录 定义介绍 严平稳随机过程: 广义平稳随机过程: 高斯随机过程: 问题解答 Question1:为什么广义平稳随机过程不一定是严平稳随机过程? Question2:为什么高斯过程若是广义平稳的,则 ...
- 时间序列研(part5)--四种典型的非平稳随机过程
学习笔记,仅供参考,有错必纠 文章目录 时间序列 四种典型的非平稳随机过程 随机游走过程 随机趋势非平稳过程或差分平稳过程.有漂移项的非平稳过程 趋势平稳过程或退势平稳过程 确定性趋势非平稳过程 看图 ...
- 随机过程 基本概念和基本类型
文章目录 随机过程 基本概念和基本类型 基本概念 有限维分布和 Kolmogorov 定理 基本类型 平稳过程 平稳过程的定义 平稳过程的遍历性 独立增量过程 随机过程 基本概念和基本类型 基本概念 ...
- 随机过程(三)平稳随机过程
文章目录 1. 定义 2. 联合平稳过程及相关函数的性质 2.1 联合平稳过程 2.2 相关函数的性质 3. 随机分析 3.1 收敛性概念 3.2 均方连续 3.3 均方导数 3.4 均方积分 4. ...
最新文章
- datename mysql_sql DATENAME 用法
- 如何消除网站安全的七大风险
- springcloud 子项目怎么导入_「 从0到1学习微服务SpringCloud 」09 补充篇-maven父子模块项目...
- 一家很好的iPhone应用程序开发公司——易标科技
- TV Distortion Bundle mac - AE画面像素破损信号干扰失真插件
- java cas并发_java并发之CAS
- 系统权限控制设计001---RBAC用户角色权限设计方案
- Hibernate框架使用教程
- 深度装机大师一键重装_深度一键重装系统软件
- python整数范围_python整数范围
- linux rs,Linux中的RS, ORS, FS, OFS
- vue 如何实现点击动态更新图形验证码
- 笔记本键盘进水几个按键失灵 还能修好么_苹果首台笔记本Mac Portable全拆卸,蒂姆·库克签名,无螺丝设计,机械键盘...
- 在使用JOOQ前,这些问题不能不清楚
- LDAP基础:3:通过389端口对openldap进行操作
- 下一代隐私基础设施的主要介绍
- Docker技术入门与实战 第二版-学习笔记-7-数据管理(volume)
- PKCS及PKCS 15个标准, Public-Key Cryptography Standards
- Win9x在Intel和AMD新处理器虚拟机抽风的原因及补丁
- 老子《道德经》第二十一章