特征函数
一、定义与基本概念
1.1 定义
设 (Ω,F,P) 是概率空间,X 是定义在其上的实值随机变量,F(x) 为其分布函数。
定义 1.1.1(特征函数): φX(t)=E[eitX]=∫−∞+∞eitxdF(x),t∈R
其中 i=−1 为虚数单位,eitX=cos(tX)+isin(tX)。
1.1.1 特殊情况
-
离散型随机变量:若 P(X=xk)=pk,k=1,2,…,则 φX(t)=∑k=1∞pkeitxk
-
连续型随机变量:若 X 有密度函数 p(x),则 φX(t)=∫−∞+∞eitxp(x)dx
1.1.2 复随机变量的数学期望
设 ξ,η 为实值随机变量,定义复随机变量 Z=ξ+iη,其数学期望为: E[Z]=E[ξ]+iE[η]
1.2 存在性
定理 1.2.1:对任意随机变量 X,其特征函数 φX(t) 总是存在且有限。
证明:由于 ∣eitX∣=1,故 ∣φX(t)∣=∣E[eitX]∣≤E[∣eitX∣]=E[1]=1<∞
二、基本性质
2.1 有界性与连续性
定理 2.1.1:
- ∣φX(t)∣≤φX(0)=1
- φX(t) 是一致连续函数
证明:
-
由三角不等式: ∣φX(t)∣=∣E[eitX]∣≤E[∣eitX∣]=E[1]=1
-
对任意 t,h∈R:
∣φX(t+h)−φX(t)∣=∣E[ei(t+h)X−eitX]∣=∣E[eitX(eihX−1)]∣≤E[∣eihX−1∣]=E[2−2cos(hX)]≤E[min{2,∣hX∣}]由控制收敛定理,当 h→0 时,上式趋于0,且收敛速度与 t 无关,故一致连续。
2.2 对称性
定理 2.2.1: φX(−t)=φX(t) 其中 z 表示复数 z 的共轭。
推论:若 X 的分布关于原点对称,则 φX(t) 为实值函数。
2.3 线性变换
定理 2.3.1:设 Y=aX+b,其中 a,b 为常数,则 φY(t)=eitbφX(at)
证明: φY(t)=E[eitY]=E[eit(aX+b)]=eitbE[ei(at)X]=eitbφX(at)
2.4 独立随机变量的和
定理 2.4.1:若 X1,X2,…,Xn 相互独立,则 φX1+X2+⋯+Xn(t)=∏k=1nφXk(t)
证明:由独立性,
φX1+⋯+Xn(t)=E[eit(X1+⋯+Xn)]=E[eitX1⋅eitX2⋯eitXn]=E[eitX1]⋅E[eitX2]⋯E[eitXn]=k=1∏nφXk(t)2.5 非负定性
定义 2.5.1:函数 f(t) 称为非负定的,若对任意 n∈N,任意实数 t1,t2,…,tn 和复数 z1,z2,…,zn,有: ∑j=1n∑k=1nf(tj−tk)zjzk≥0
定理 2.5.2(波赫纳-辛钦定理):φ(t) 是某随机变量的特征函数当且仅当:
- φ(0)=1
- φ(t) 连续
- φ(t) 非负定
三、特征函数与矩的关系
3.1 矩的存在性
定理 3.1.1:若 E[∣X∣k]<∞,则 φX(t) 在 t=0 处 k 阶可导,且: φX(k)(0)=ikE[Xk]
推论: E[Xk]=ikφX(k)(0)
证明概要:对任意 t, φX(t)=E[eitX]=E[∑n=0∞n!(itX)n]
若 E[∣X∣k]<∞,则可逐项求导 k 次,得到: φX(k)(t)=E[dtkdkeitX]=E[(iX)keitX]
令 t=0,即得结论。
3.2 泰勒展开
定理 3.2.1:若 E[∣X∣n]<∞,则 φX(t) 在 t=0 处有 n 阶泰勒展开: φX(t)=∑k=0nk!(it)kE[Xk]+o(tn)
推论:若所有阶矩都存在,则 φX(t)=∑k=0∞k!(it)kE[Xk]
3.3 可微性与尾部性质
特征函数的光滑性反映了分布的尾部衰减速度:
- 若 φX(t) 无穷次可微,则分布具有所有阶矩
- 若 φX(t) 在 t=0 处 k 阶可导,则 E[∣X∣k]<∞
- 例如:标准柯西分布的特征函数为 e−∣t∣,连续但不可微,对应其重尾性质
四、逆转公式与唯一性定理
4.1 逆转公式
定理 4.1.1(逆转定理):设 F(x) 和 φ(t) 分别为随机变量 X 的分布函数和特征函数,x1<x2 是 F(x) 的连续点,则: F(x2)−F(x1)=limT→∞2π1∫−TTite−itx1−e−itx2φ(t)dt
证明:
2π1∫−TTite−itx1−e−itx2φ(t)dt=2π1∫−TTite−itx1−e−itx2E[eitX]dt=E[2π1∫−TTiteit(X−x1)−eit(X−x2)dt]=E[π1∫0Ttsin(t(X−x1))−sin(t(X−x2))dt]利用狄利克雷积分:
∫0∞tsin(at)dt=⎩⎨⎧2π,0,−2π,a>0a=0a<0可得结论。
4.2 唯一性定理
定理 4.2.1(唯一性定理):分布函数由其特征函数唯一确定。
推论:若两个随机变量的特征函数相同,则它们同分布。
4.3 密度函数的恢复
定理 4.3.1:若特征函数 φ(t) 绝对可积,即 ∫−∞∞∣φ(t)∣dt<∞,则对应的分布为连续型,且密度函数为: p(x)=2π1∫−∞∞e−itxφ(t)dt
五、常见分布的特征函数
| 分布 | 参数 | 特征函数 φ(t) |
|---|---|---|
| 退化分布 | P(X=a)=1 | eita |
| 两点分布 | B(1,p) | q+peit |
| 二项分布 | B(n,p) | (q+peit)n |
| 泊松分布 | P(λ) | eλ(eit−1) |
| 几何分布 | P(X=k)=pqk−1 | 1−qeitpeit |
| 负二项分布 | NB(r,p) | (1−qeitpeit)r |
| 均匀分布 | U(a,b) | it(b−a)eitb−eita |
| 指数分布 | Exp(λ) | λ−itλ |
| 正态分布 | N(μ,σ2) | eitμ−21σ2t2 |
| 标准正态分布 | N(0,1) | e−21t2 |
| Γ(α,λ) | α>0,λ>0 | (λ−itλ)α |
| χ2(n) | n 自由度 | (1−2it)−n/2 |
| t 分布 | n 自由度 | Kn/2(0)Kn/2(∣t∣n) |
| 柯西分布 | Cauchy(0,1) | e−∣t∣ |
六、多元特征函数
6.1 定义
设 X=(X1,X2,…,Xn)T 为 n 维随机向量,t=(t1,t2,…,tn)T∈Rn,则多元特征函数定义为: φX(t)=E[eitTX]=E[ei(t1X1+t2X2+⋯+tnXn)]
6.2 性质
-
边缘分布:φXk(tk)=φX(0,…,0,tk,0,…,0)
-
独立性:随机变量 X1,X2,…,Xn 相互独立当且仅当: φX(t)=∏k=1nφXk(tk)
-
线性变换:设 Y=AX+b,其中 A 为 m×n 矩阵,b∈Rm,则: φY(s)=eisTbφX(ATs)
-
多元正态分布:若 X∼Nn(μ,Σ),则: φX(t)=exp(itTμ−21tTΣt)
七、特征函数的应用
7.1 独立随机变量和的分布
利用特征函数的乘积性质,可以方便地求独立随机变量和的分布。
例:设 X1,X2,…,Xn 独立同分布于 N(0,1),则 φX1+⋯+Xn(t)=(e−21t2)n=e−2nt2 故 X1+⋯+Xn∼N(0,n)。
7.2 中心极限定理的证明
特征函数是证明中心极限定理的重要工具。设 X1,X2,… 独立同分布,E[Xi]=μ,Var(Xi)=σ2,则标准化和 Zn=σn∑i=1nXi−nμ 的特征函数为: φZn(t)=[φX1(σnt)e−iμt/(σn)]n
利用泰勒展开,可证 φZn(t)→e−21t2,即 ZndN(0,1)。
7.3 弱收敛的判别
定理 7.3.1(连续性定理):分布函数序列 {Fn(x)} 弱收敛于分布函数 F(x) 当且仅当对应的特征函数序列 {φn(t)} 逐点收敛于 φ(t),且 φ(t) 在 t=0 处连续。
7.4 矩的计算
通过特征函数的导数可以方便地计算矩: E[Xk]=ikφX(k)(0)
7.5 分布的识别
由于特征函数与分布函数一一对应,可以通过特征函数识别分布类型。
八、与其他变换的关系
8.1 与傅里叶变换的关系
特征函数本质上是概率密度函数的傅里叶变换: φX(t)=F[p(x)](t)=∫−∞∞eitxp(x)dx
8.2 与矩母函数的关系
矩母函数 MX(t)=E[etX] 与特征函数的关系为: φX(t)=MX(it)
矩母函数不一定总是存在,但特征函数总是存在。
8.3 与拉普拉斯变换的关系
对于非负随机变量,其拉普拉斯变换 LX(s)=E[e−sX] 与特征函数的关系为: φX(t)=LX(−it)
九、总结
特征函数是概率论中极其重要的工具,具有以下特点:
- 存在性:对任意随机变量,特征函数总是存在
- 唯一性:特征函数与分布函数一一对应
- 计算便利性:独立随机变量和的特征函数等于各特征函数的乘积
- 理论价值:在极限定理、弱收敛理论中发挥核心作用
- 应用广泛性:可用于矩的计算、分布识别、参数估计等
特征函数方法由保罗·莱维(Paul Lévy)系统发展,已成为现代概率论不可或缺的分析工具。
部分信息可能已经过时