随机过程的基本概念机有限维分布的数字特征

发布于:2025-03-18 ⋅ 阅读:(21) ⋅ 点赞:(0)

随机过程的基本概念及有限维分布的数字特征:从理论到应用

在现代科学与技术的众多领域中,随机过程的身影无处不在,它如同一位神秘的幕后操纵者,影响着我们生活的方方面面。今天,咱们就一起来深入探究随机过程的基本概念以及有限维分布的数字特征,说不定能为你打开一扇新的知识大门哦😉

一、随机过程的基本概念

(一)定义大揭秘

随机过程,简单来说,就是一族依赖于某个参数(通常是时间参数 t t t)的随机变量 { X ( t ) , t ∈ T } \{X(t), t \in T\} {X(t),tT}。这里的 T T T 被称作参数集,它的形式多种多样,可以是离散的集合,比如 T = { 0 , 1 , 2 , ⋯   } T = \{0, 1, 2, \cdots\} T={0,1,2,},就好像我们按顺序计数的一个个时间点;也可以是连续的集合,像 T = [ 0 , + ∞ ) T = [0, +\infty) T=[0,+),代表从现在开始一直持续下去的连续时间。

对于每一个固定的 t ∈ T t \in T tT X ( t ) X(t) X(t) 就是一个随机变量啦。想象一下,每次进行随机试验,就如同开启一场充满未知的冒险,试验结果不同, X ( t ) X(t) X(t) 的取值也就不一样。当某次随机试验结束,得到一个样本结果 ω \omega ω 时, X ( t , ω ) X(t, \omega) X(t,ω) 就变成了关于 t t t 的函数,我们把它记为 x ( t ) x(t) x(t),也就是样本函数或样本轨道。不同的冒险结果 ω \omega ω,自然会对应不同的样本函数,是不是很有趣😃

(二)生活中的随机过程实例

泊松过程:电话交换台的呼叫之谜

大家平时打电话,有没有想过电话交换台在一段时间内会收到多少呼叫呢🧐 这里就涉及到泊松过程。假设 N ( t ) N(t) N(t) 表示在时间区间 [ 0 , t ] [0, t] [0,t] 内电话交换台收到的呼叫次数, t ≥ 0 t \geq 0 t0。那么 { N ( t ) , t ≥ 0 } \{N(t), t \geq 0\} {N(t),t0} 就是一个随机过程。在固定的某一时刻 t t t N ( t ) N(t) N(t) 这个随机变量可能取值为 0 0 0(超级安静,一个电话都没有)、 1 1 1(来了一通电话)、 2 2 2(接连两通电话)…… 不同的时间段,收到的呼叫次数完全不确定,而且每次观察(相当于一次试验)都会得到不同的样本函数。这就好比每天不同时段,电话交换台的忙碌程度都不一样,充满了随机性。

布朗运动:微观世界的粒子舞蹈

在微观世界里,微小粒子的运动也能用随机过程来描述,这就是布朗运动。想象一下,微小粒子在液体或气体中,由于受到周围分子的随机碰撞,一直在做不规则运动。设 W ( t ) W(t) W(t) 表示粒子在时刻 t t t 的位置相对于初始位置的位移, t ≥ 0 t \geq 0 t0 { W ( t ) , t ≥ 0 } \{W(t), t \geq 0\} {W(t),t0} 就是一个典型的随机过程。对于每个固定的 t t t W ( t ) W(t) W(t) 的取值就像粒子的一次 “任性走位”,充满了随机性。而且不同的试验(不同的观察时段),粒子运动留下的样本路径也是千变万化,充分展现了微观世界的奇妙与不可预测。

(三)随机过程的分类方法

按参数集分类:离散与连续的区别

离散参数随机过程:当参数集 T T T 是离散的集合时,就形成了离散参数随机过程。比如前面提到的按离散时间点记录电话呼叫次数的泊松过程,如果我们只在整点时刻去统计呼叫次数,那它就是离散参数随机过程。这种类型在处理一些按固定间隔发生事件的场景中很有用,就像我们统计每天整点时网站的访问量。

连续参数随机过程:与之相对的,当参数集 T T T 是连续的区间,像 T = [ 0 , + ∞ ) T = [0, +\infty) T=[0,+),这就是连续参数随机过程。布朗运动就是最好的例子,因为粒子的运动在连续的时间里不间断,每时每刻都在发生变化,用连续参数随机过程来描述再合适不过。在研究一些随时间连续变化的现象,比如气温的连续变化时,连续参数随机过程就派上大用场了。

按状态空间分类:离散状态与连续状态的差异

离散状态随机过程:如果随机变量 X ( t ) X(t) X(t) 的取值集合是离散的,那这个随机过程就是离散状态随机过程。以泊松过程为例, N ( t ) N(t) N(t) 的取值只能是非负整数集合 { 0 , 1 , 2 , ⋯   } \{0, 1, 2, \cdots\} {0,1,2,},是一个个离散的数值,所以它属于离散状态随机过程。在一些计数问题,比如统计某条街道每天经过的汽车数量(只能是整数),就可以用离散状态随机过程来建模。

连续状态随机过程:当随机变量 X ( t ) X(t) X(t) 的取值集合是连续的,就是连续状态随机过程。布朗运动中的 W ( t ) W(t) W(t),它的取值范围是整个实数轴 ( − ∞ , + ∞ ) (-\infty, +\infty) (,+),可以取到任意实数,体现了连续状态的特点。在描述一些连续变化的物理量,比如物体的速度(速度可以是任意实数)时,连续状态随机过程就能很好地发挥作用。

了解了随机过程的基本概念后,接下来咱们深入探讨有限维分布及其数字特征,这可是理解随机过程统计特性的关键哦😎

二、有限维分布

(一)定义详解

{ X ( t ) , t ∈ T } \{X(t), t \in T\} {X(t),tT} 是一个随机过程,对于任意正整数 n n n t 1 , t 2 , ⋯   , t n ∈ T t_1, t_2, \cdots, t_n \in T t1,t2,,tnT n n n 维随机变量 ( X ( t 1 ) , X ( t 2 ) , ⋯   , X ( t n ) ) (X(t_1), X(t_2), \cdots, X(t_n)) (X(t1),X(t2),,X(tn)) 的联合分布函数

F t 1 , t 2 , ⋯   , t n ( x 1 , x 2 , ⋯   , x n ) = P { X ( t 1 ) ≤ x 1 , X ( t 2 ) ≤ x 2 , ⋯   , X ( t n ) ≤ x n } F_{t_1,t_2,\cdots,t_n}(x_1,x_2,\cdots,x_n)=P\{X(t_1)\leq x_1,X(t_2)\leq x_2,\cdots,X(t_n)\leq x_n\} Ft1,t2,,tn(x1,x2,,xn)=P{X(t1)x1,X(t2)x2,,X(tn)xn}

这个联合分布函数就被称为随机过程 { X ( t ) , t ∈ T } \{X(t), t \in T\} {X(t),tT} n n n 维有限维分布函数。而一族有限维分布函数 { F t 1 , t 2 , ⋯   , t n ( x 1 , x 2 , ⋯   , x n ) : n ≥ 1 , t 1 , t 2 , ⋯   , t n ∈ T } \{F_{t_1,t_2,\cdots,t_n}(x_1,x_2,\cdots,x_n):n\geq1,t_1,t_2,\cdots,t_n\in T\} {Ft1,t2,,tn(x1,x2,,xn):n1,t1,t2,,tnT} 则构成了随机过程 { X ( t ) , t ∈ T } \{X(t), t \in T\} {X(t),tT} 的有限维分布族。它就像是一本记录随机过程在不同时刻取值组合概率的 “宝典”,通过它我们能深入了解随机过程在多个时刻的联合行为。

(二)有限维分布的重要性质

对称性:顺序无关的概率奥秘

对于 ( 1 , 2 , ⋯   , n ) (1, 2, \cdots, n) (1,2,,n) 的任意一个排列 ( i 1 , i 2 , ⋯   , i n ) (i_1, i_2, \cdots, i_n) (i1,i2,,in),有

F t i 1 , t i 2 , ⋯   , t i n ( x i 1 , x i 2 , ⋯   , x i n ) = F t 1 , t 2 , ⋯   , t n ( x 1 , x 2 , ⋯   , x n ) F_{t_{i_1},t_{i_2},\cdots,t_{i_n}}(x_{i_1},x_{i_2},\cdots,x_{i_n}) = F_{t_1,t_2,\cdots,t_n}(x_1,x_2,\cdots,x_n) Fti1,ti2,,tin(xi1,xi2,,xin)=Ft1,t2,,tn(x1,x2,,xn)

这意味着有限维分布函数关于变量的排列顺序是对称的。为什么会这样呢?其实很好理解,因为联合事件 { X ( t i 1 ) ≤ x i 1 , X ( t i 2 ) ≤ x i 2 , ⋯   , X ( t i n ) ≤ x i n } \{X(t_{i_1})\leq x_{i_1},X(t_{i_2})\leq x_{i_2},\cdots,X(t_{i_n})\leq x_{i_n}\} {X(ti1)xi1,X(ti2)xi2,,X(tin)xin} { X ( t 1 ) ≤ x 1 , X ( t 2 ) ≤ x 2 , ⋯   , X ( t n ) ≤ x n } \{X(t_1)\leq x_1,X(t_2)\leq x_2,\cdots,X(t_n)\leq x_n\} {X(t1)x1,X(t2)x2,,X(tn)xn} 本质上是同一个事件,只是变量的顺序不同,所以它们发生的概率自然相等。就好比从一个装有不同颜色球的袋子里依次摸出红、蓝、绿三个球,和先摸出蓝、绿、红三个球,这两种情况的总概率是一样的,只是摸球顺序变了。

相容性:高低维度的关联纽带

m < n m < n m<n,如果在 F t 1 , t 2 , ⋯   , t n ( x 1 , x 2 , ⋯   , x n ) F_{t_1,t_2,\cdots,t_n}(x_1,x_2,\cdots,x_n) Ft1,t2,,tn(x1,x2,,xn) 中令 x m + 1 → + ∞ , x m + 2 → + ∞ , ⋯   , x n → + ∞ x_{m + 1} \to +\infty, x_{m + 2} \to +\infty, \cdots, x_n \to +\infty xm+1+,xm+2+,,xn+,则有

F t 1 , t 2 , ⋯   , t m ( x 1 , x 2 , ⋯   , x m ) = lim ⁡ x m + 1 → + ∞ , ⋯   , x n → + ∞ F t 1 , t 2 , ⋯   , t n ( x 1 , x 2 , ⋯   , x n ) F_{t_1,t_2,\cdots,t_m}(x_1,x_2,\cdots,x_m)=\lim_{x_{m + 1}\to+\infty,\cdots,x_n\to+\infty}F_{t_1,t_2,\cdots,t_n}(x_1,x_2,\cdots,x_n) Ft1,t2,,tm(x1,x2,,xm)=limxm+1+,,xn+Ft1,t2,,tn(x1,x2,,xn)

这一性质揭示了较低维的有限维分布函数和较高维的有限维分布函数之间的紧密联系。直观地说,当我们从关注更多随机变量(较高维)的联合分布,转变为只关注较少随机变量(较低维)的联合分布时,较低维的分布可以通过对那些不关注的随机变量取极限(让它们的取值范围趋于整个取值空间)来得到。比如,二维分布 F t 1 , t 2 ( x 1 , x 2 ) F_{t_1,t_2}(x_1,x_2) Ft1,t2(x1,x2) 可以从三维分布 F t 1 , t 2 , t 3 ( x 1 , x 2 , x 3 ) F_{t_1,t_2,t_3}(x_1,x_2,x_3) Ft1,t2,t3(x1,x2,x3) 中,令 x 3 → + ∞ x_3 \to +\infty x3+ 得到,即 F t 1 , t 2 ( x 1 , x 2 ) = lim ⁡ x 3 → + ∞ F t 1 , t 2 , t 3 ( x 1 , x 2 , x 3 ) F_{t_1,t_2}(x_1,x_2)=\lim_{x_3\to+\infty}F_{t_1,t_2,t_3}(x_1,x_2,x_3) Ft1,t2(x1,x2)=limx3+Ft1,t2,t3(x1,x2,x3)。这就像是从一个复杂的拼图中,只关注其中一部分小块的组合方式,而忽略其他部分,通过这种方式从整体的拼图规则(较高维分布)推导出部分的拼图规则(较低维分布)。

有限维分布的这些性质为我们进一步研究随机过程的数字特征奠定了基础,下面我们就来看看这些重要的数字特征都有哪些神奇之处😜

三、有限维分布的数字特征

(一)均值函数:随机过程的平均 “指向标”

定义解析

随机过程 { X ( t ) , t ∈ T } \{X(t), t \in T\} {X(t),tT} 的均值函数 μ X ( t ) \mu_X(t) μX(t) 定义为

μ X ( t ) = E [ X ( t ) ] = ∫ − ∞ + ∞ x f X ( x , t ) d x \mu_X(t)=E[X(t)]=\int_{-\infty}^{+\infty}xf_X(x,t)dx μX(t)=E[X(t)]=+xfX(x,t)dx

这里,当 X ( t ) X(t) X(t) 是连续型随机变量时, f X ( x , t ) f_X(x,t) fX(x,t) 是它的概率密度函数;如果 X ( t ) X(t) X(t) 是离散型随机变量, μ X ( t ) = ∑ x x P { X ( t ) = x } \mu_X(t)=\sum_{x}xP\{X(t)=x\} μX(t)=xxP{X(t)=x}。均值函数 μ X ( t ) \mu_X(t) μX(t) 就像是随机过程在时刻 t t t 的一个平均 “指向标”,它告诉我们在这个时刻,随机过程的取值平均来说大概在什么位置。

计算示例:以 **** **** 为例

设随机过程 X ( t ) = A cos ⁡ ( ω t + Φ ) X(t)=A\cos(\omega t + \Phi) X(t)=Acos(ωt+Φ),其中 A A A ω \omega ω 是常数, Φ \Phi Φ 是在区间 [ 0 , 2 π ] [0, 2\pi] [0,2π] 上均匀分布的随机变量。我们来求它的均值函数。

首先, Φ \Phi Φ 的概率密度函数为 f Φ ( φ ) = 1 2 π , 0 ≤ φ ≤ 2 π f_{\Phi}(\varphi)=\frac{1}{2\pi}, 0\leq\varphi\leq2\pi fΦ(φ)=2π1,0φ2π

然后,根据均值的定义

μ X ( t ) = E [ X ( t ) ] = E [ A cos ⁡ ( ω t + Φ ) ] = A ∫ 0 2 π cos ⁡ ( ω t + φ ) 1 2 π d φ = A 2 π ∫ 0 2 π cos ⁡ ( ω t + φ ) d φ \begin{align*} \mu_X(t)&=E[X(t)]\\ &=E[A\cos(\omega t+\Phi)]\\ &=A\int_{0}^{2\pi}\cos(\omega t+\varphi)\frac{1}{2\pi}d\varphi\\ &=\frac{A}{2\pi}\int_{0}^{2\pi}\cos(\omega t+\varphi)d\varphi \end{align*} μX(t)=E[X(t)]=E[Acos(ωt+Φ)]=A02πcos(ωt+φ)2π1dφ=2πA02πcos(ωt+φ)dφ

u = ω t + φ u = \omega t+\varphi u=ωt+φ,则 d u = d φ du = d\varphi du=dφ。当 φ = 0 \varphi = 0 φ=0 时, u = ω t u=\omega t u=ωt;当 φ = 2 π \varphi = 2\pi φ=2π 时, u = ω t + 2 π u=\omega t + 2\pi u=ωt+2π

μ X ( t ) = A 2 π ∫ ω t ω t + 2 π cos ⁡ ( u ) d u = A 2 π [ sin ⁡ ( u ) ] ω t ω t + 2 π = A 2 π ( sin ⁡ ( ω t + 2 π ) − sin ⁡ ( ω t ) ) = 0 \begin{align*} \mu_X(t)&=\frac{A}{2\pi}\int_{\omega t}^{\omega t + 2\pi}\cos(u)du\\ &=\frac{A}{2\pi}[\sin(u)]_{\omega t}^{\omega t + 2\pi}\\ &=\frac{A}{2\pi}(\sin(\omega t + 2\pi)-\sin(\omega t))\\ &=0 \end{align*} μX(t)=2πAωtωt+2πcos(u)du=2πA[sin(u)]ωtωt+2π=2πA(sin(ωt+2π)sin(ωt))=0

所以,这个随机过程 X ( t ) X(t) X(t) 的均值函数 μ X ( t ) = 0 \mu_X(t)=0 μX(t)=0。这说明从平均意义上讲,这个随机过程在各个时刻的取值围绕着 0 0 0 波动。

(二)方差函数:随机过程的波动 “度量尺”

定义阐释

随机过程 { X ( t ) , t ∈ T } \{X(t), t \in T\} {X(t),tT} 的方差函数 σ X 2 ( t ) \sigma_X^2(t) σX2(t) 定义为

σ X 2 ( t ) = D [ X ( t ) ] = E [ ( X ( t ) − μ X ( t ) ) 2 ] = E [ X 2 ( t ) ] − μ X 2 ( t ) \sigma_X^2(t)=D[X(t)]=E[(X(t)-\mu_X(t))^2]=E[X^2(t)]-\mu_X^2(t) σX2(t)=D[X(t)]=E[(X(t)μX(t))2]=E[X2(t)]μX2(t)

方差函数 σ X 2 ( t ) \sigma_X^2(t) σX2(t) 就像是一把专门用来度量随机过程在时刻 t t t 相对于均值 μ X ( t ) \mu_X(t) μX(t) 偏离程度的 “尺子”。方差越大,说明 X ( t ) X(t) X(t) 的取值在均值附近的波动就越大,就好像一个调皮的孩子,总是在平均值周围 “上蹿下跳”,偏离得越远,方差就越大。

计算示例:继续 **** **** 的例子

对于上述随机过程 X ( t ) = A cos ⁡ ( ω t + Φ ) X(t)=A\cos(\omega t+\Phi) X(t)=Acos(ωt+Φ),我们来求其方差函数。

先求 E [ X 2 ( t ) ] E[X^2(t)] E[X2(t)]

E [ X 2 ( t ) ] = E [ A 2 cos ⁡ 2 ( ω t + Φ ) ] = A 2 E [ cos ⁡ 2 ( ω t + Φ ) ] \begin{align*} E[X^2(t)]&=E[A^2\cos^2(\omega t+\Phi)]\\ &=A^2E[\cos^2(\omega t+\Phi)]\\ \end{align*} E[X2(t)]=E[A2cos2(ωt+Φ)]=A2E[cos2(ωt+Φ)]

根据三角函数的恒等式 cos ⁡ 2 α = 1 + cos ⁡ ( 2 α ) 2 \cos^2\alpha=\frac{1 + \cos(2\alpha)}{2} cos2α=21+cos(2α),则 cos ⁡ 2 ( ω t + Φ ) = 1 + cos ⁡ ( 2 ( ω t + Φ ) ) 2 \cos^2(\omega t+\Phi)=\frac{1+\cos(2(\omega t+\Phi))}{2} cos2(ωt+Φ)=21+cos(2(ωt+Φ))

E [ X 2 ( t ) ] = A 2 E [ 1 + cos ⁡ ( 2 ( ω t + Φ ) ) 2 ] = A 2 2 E [ 1 + cos ⁡ ( 2 ( ω t + Φ ) ) ] = A 2 2 ( E [ 1 ] + E [ cos ⁡ ( 2 ( ω t + Φ ) ) ] ) \begin{align*} E[X^2(t)]&=A^2E[\frac{1+\cos(2(\omega t+\Phi))}{2}]\\ &=\frac{A^2}{2}E[1+\cos(2(\omega t+\Phi))]\\ &=\frac{A^2}{2}(E[1]+E[\cos(2(\omega t+\Phi))]) \end{align*} E[X2(t)]=A2E[21+cos(2(ωt+Φ))]=2A2E[1+cos(2(ωt+Φ))]=2A2(E[1]+E[cos(2(ωt+Φ))])

因为 E [ 1 ] = 1 E[1]=1 E[1]=1,且 E [ cos ⁡ ( 2 ( ω t + Φ ) ) ] = ∫ 0 2 π cos ⁡ ( 2 ( ω t + φ ) ) 1 2 π d φ E[\cos(2(\omega t+\Phi))]=\int_{0}^{2\pi}\cos(2(\omega t+\varphi))\frac{1}{2\pi}d\varphi E[cos(2(ωt+Φ))]=02πcos(2(ωt+φ))2π1dφ

v = 2 ( ω t + φ ) v = 2(\omega t+\varphi) v=2(ωt+φ),则 d v = 2 d φ dv = 2d\varphi dv=2dφ。当 φ = 0 \varphi = 0 φ=0 时, v = 2 ω t v = 2\omega t v=2ωt;当 φ = 2 π \varphi = 2\pi φ=2π 时, v = 2 ω t + 4 π v = 2\omega t + 4\pi v=2ωt+4π

E [ cos ⁡ ( 2 ( ω t + Φ ) ) ] = 1 2 π ∫ 0 2 π cos ⁡ ( 2 ( ω t + φ ) ) d φ = 1 4 π ∫ 2 ω t 2 ω t + 4 π cos ⁡ ( v ) d v = 1 4 π [ sin ⁡ ( v ) ] 2 ω t 2 ω t + 4 π = 0 \begin{align*} E[\cos(2(\omega t+\Phi))]&=\frac{1}{2\pi}\int_{0}^{2\pi}\cos(2(\omega t+\varphi))d\varphi\\ &=\frac{1}{4\pi}\int_{2\omega t}^{2\omega t + 4\pi}\cos(v)dv\\ &=\frac{1}{4\pi}[\sin(v)]_{2\omega t}^{2\omega t + 4\pi}\\ &=0 \end{align*} E[cos(2(ωt+Φ))]=2π102πcos(2(ωt+φ))dφ=4π12ωt2ωt+4πcos(v)dv=4π1[sin(v)]2ωt2ωt+4π=0

所以 E [ X 2 ( t ) ] = A 2 2 E[X^2(t)]=\frac{A^2}{2} E[X2(t)]=2A2

已知 μ X ( t ) = 0 \mu_X(t)=0 μX(t)=0,根据方差函数定义 σ X 2 ( t ) = E [ X 2 ( t ) ] − μ X 2 ( t ) \sigma_X^2(t)=E[X^2(t)]-\mu_X^2(t) σX2(t)=E[X2(t)]μX2(t),可得 σ X 2 ( t ) = A 2 2 \sigma_X^2(t)=\frac{A^2}{2} σX2(t)=2A2。这表明这个随机过程 X ( t ) X(t) X(t) 在均值 0 0 0 附近的波动程度是固定的,为 A 2 2 \frac{A^2}{2} 2A2

(三)协方差函数:不同时刻取值的 “关联桥梁”

定义解读

随机过程 { X ( t ) , t ∈ T } \{X(t), t \in T\} {X(t),tT} 的协方差函数 C X ( s , t ) C_{X}(s,t) CX(s,t) 定义为

C X ( s , t ) = E [ ( X ( s ) − μ X ( s ) ) ( X ( t ) − μ X ( t ) ) ] = E [ X ( s ) X ( t ) ] − μ X ( s ) μ X ( t ) C_{X}(s,t)=E[(X(s)-\mu_X(s))(X(t)-\mu_X(t))]=E[X(s)X(t)]-\mu_X(s)\mu_X(t) CX(s,t)=E[(X(s)μX(s))(X(t)μX(t))]=E[X(s)X(t)]μX(s)μX(t)

对于任意 s , t ∈ T s,t \in T s,tT。协方差函数 C X ( s , t ) C_{X}(s,t) CX(s,t) 就像是一座桥梁,连接着随机过程在不同时刻 s s s t t t 取值之间的关系


网站公告

今日签到

点亮在社区的每一天
去签到