《通信原理》第四讲 第2章随机过程 载有信息的信号是不可预测的,或者说带有某种随机性。干扰信息信号的噪 声更是不可预测的。这些不可预测的信号和噪声都是随机过程。但随机信号和噪 声的不可预测性的意义完全不同。随机信号的不可预测性是它携带信息的能力, 而噪声的不可预测性则是有害的,它将使有用信号受到污染。 在通信系统中,随机过程是重要的数学工具。它在信息源的统计建模、信源 输出的数字化、信道特性的描述以及评估通信系统的性能等方面都是很重要的。 本章将扼要介绍通信系统所必需的内容,即随机过程的基本概念、统计特性 及其通过线性系统的分析方法,并主要介绍用于全书的几个重要结论,这些对于 设计通信系统及其性能的评估都是十分有用的 §21随机过程的基本概念和统计特性 随机过程 下面我们看一个例子: 设有n台性能完全相同的接收机。在相同的工作环境和测试条件下记录各台 接收机的输出噪声波形,测试结果表明,n条曲线中找不到两个完全相同的波形 这就是说,接收机输出的噪声电压随时间的变化是不可预知的,因而它是一个随 机过程。 给随机过程下一个更为严格的定义:设S,k=1,2……是随机试验。每一次 试验都有一条时间波形(称为样本函数或实现),记作x(),所有可能出现的结 果的总体{x1(1)x2(1)…,xn(1)…,}就构成一随机过程,记作ξ(t)。简言之,无 穷多个样本函数的总体叫做随机过程,如图2-1所示
《通信原理》 第四讲 第 2 章 随机过程 载有信息的信号是不可预测的,或者说带有某种随机性。干扰信息信号的噪 声更是不可预测的。这些不可预测的信号和噪声都是随机过程。但随机信号和噪 声的不可预测性的意义完全不同。随机信号的不可预测性是它携带信息的能力, 而噪声的不可预测性则是有害的,它将使有用信号受到污染。 在通信系统中,随机过程是重要的数学工具。它在信息源的统计建模、信源 输出的数字化、信道特性的描述以及评估通信系统的性能等方面都是很重要的。 本章将扼要介绍通信系统所必需的内容,即随机过程的基本概念、统计特性 及其通过线性系统的分析方法,并主要介绍用于全书的几个重要结论,这些对于 设计通信系统及其性能的评估都是十分有用的。 §2.1 随机过程的基本概念和统计特性 一、 随机过程 下面我们看一个例子: 设有 n 台性能完全相同的接收机。在相同的工作环境和测试条件下记录各台 接收机的输出噪声波形,测试结果表明,n 条曲线中找不到两个完全相同的波形。 这就是说,接收机输出的噪声电压随时间的变化是不可预知的,因而它是一个随 机过程。 给随机过程下一个更为严格的定义:设Sk , k = 1,2LL是随机试验。每一次 试验都有一条时间波形(称为样本函数或实现),记作 x (t) i ,所有可能出现的结 果的总体{ x1 (t), x2 (t),L, xn (t),L,}就构成一随机过程,记作ξ (t) 。简言之,无 穷多个样本函数的总体叫做随机过程,如图 2-1 所示
毕本空同 图2-1样本函数的总体 随机过程的基本特征体现在两个方面:其一,它是一个时间函数;其二,在 固定某一观察时刻1上,全体样本在1时刻的取值(41)是一个不含t变化的随机 变量。 随机过程的统计特性 设5(1)表示一个随机过程,在任意给定的时刻t1∈T,5(1)小于或等于某 数值x1的概率P(t1)≤x],简记为F1(x1,41),即 F1(x1,t1)=P[5(1)≤x] (2.1-1) 称为随机过程5(1)的一维分布函数。如果F(x1,1)对x1的偏导数存在,有 aF1(x1,t1) f(x1,t1) 2.1-2) 则称f(x1,1)为(1)的一维概率密度函数。随机过程的一维分布函数或一维概率 密度函数仅仅描述了随机过程在各个孤立时刻上的统计特性,而没有说明随机过 程在不同时刻取值之间的内在联系。 任给两个时刻t1t2∈T,则随机变量ξ(1)和5(2)构成一个二元随机变量 ξ(1),5(2)},称
图 2-1 样本函数的总体 随机过程的基本特征体现在两个方面:其一,它是一个时间函数;其二,在 固定某一观察时刻 1t 上,全体样本在 1t 时刻的取值 ( )1 ξ t 是一个不含 t 变化的随机 变量。 二、 随机过程的统计特性 设ξ (t) 表示一个随机过程,在任意给定的时刻 1t ∈T , ( )1 ξ t 小于或等于某一 数值 1 x 的概率 [ ( ) ] 1 1 P ξ t ≤ x ,简记为 ( , ) 1 1 1 F x t ,即 ( , ) [ ( ) ] 1 1 1 1 1 F x t = P ξ t ≤ x (2.1-1) 称为随机过程ξ (t) 的一维分布函数。如果 ( , ) 1 1 1 F x t 对 1 x 的偏导数存在,有 ( , ) ( , ) 1 1 1 1 1 1 1 f x t x F x t = ∂ ∂ (2.1-2) 则称 ( , ) 1 1 1 f x t 为ξ (t) 的一维概率密度函数。随机过程的一维分布函数或一维概率 密度函数仅仅描述了随机过程在各个孤立时刻上的统计特性,而没有说明随机过 程在不同时刻取值之间的内在联系。 任给两个时刻 1 2 t ,t ∈T ,则随机变量 ( )1 ξ t 和 ( ) 2 ξ t 构成一个二元随机变量 { ( )1 ξ t , ( ) 2 ξ t },称 { } ( ) , ( ) , , ( ) ( 2 . 2 ) ( , , , ; , , , ) 1 1 2 2 1 2 1 2 = ≤ ≤ n ≤ n − n n n P t x t x t x F x x x t t t ξ ξ L ξ L L
1,t2,)=P{5(1)≤x2(2)≤x2 (2.1-3) 为随机过程(1)的二维分布函数。如果存在 a3F2(x,x,=f1(x1,x1,42) (2.1-4) 则称f2(x1,x2;t1l2)为5(1)的二维概率密度函数。 同理,可定义ξ()的n维分布函数和n维概率密度函数。显然,n越大, 对随机过程统计特性的描述就越充分。 三、随机过程的数字特征 分布函数或概率密度函数虽然能够较全面地描述随机过程的统计特性。但 是,有时不易或不需求出分布函数和概率密度函数,而用随机过程的数字特征来 描述随机过程的统计特性,更简单直观 a)数学期望 设随机过程(1)在任意时刻的数学期望,记作a(t), a()=E{()]=xf(x)h (2.1-6) a()是时间t的函数,它表示随机过程的n个样本函数曲线的摆动中心 b)方差 【()-a()2 =E[5()]2-[a()]2 (2.1-7) Lxf(x, 1dr-[a(o2 D[()常记为a2()。可见方差等于均方值与数学期望平方之差。它表示随机过 程在时刻t对于均值a()的偏离程度。 均值和方差描述了随机过程在各个孤立时刻的特征,为了描述随机过程在两 个不同时刻状态之间的联系,还需利用二维概率密度引入新的数字特征
F2 (x1 , x2 ;t1 ,t2 ,) = P{ ξ (t1 ) ≤ x1 ,ξ (t2 ) ≤ x2 } (2.1-3) 为随机过程ξ (t) 的二维分布函数。如果存在 ( , ; , ) ( , ; , ) 2 1 2 1 2 1 2 2 1 2 1 2 2 f x x t t x x F x x t t = ∂ ⋅ ∂ ∂ (2.1-4) 则称 ( , , ) 2 1 2 1 2 f x x ;t t 为ξ (t) 的二维概率密度函数。 同理,可定义 ξ (t) 的 n 维分布函数和 n 维概率密度函数。显然,n 越大, 对随机过程统计特性的描述就越充分。 三、 随机过程的数字特征 分布函数或概率密度函数虽然能够较全面地描述随机过程的统计特性。但 是,有时不易或不需求出分布函数和概率密度函数,而用随机过程的数字特征来 描述随机过程的统计特性,更简单直观。 a) 数学期望 设随机过程ξ (t) 在任意时刻的数学期望,记作 a(t), [ ] ∫ ∞ −∞ a(t) = E (t) = xf (x,t)dx ξ 1 (2.1-6) a(t)是时间 t 的函数,它表示随机过程的 n 个样本函数曲线的摆动中心。 b) 方差 { } 2 1 2 2 2 2 ( , ) [ ( )] [ ( )] [ ( )] [ ( )] [ ( ) ( )] x f x t dx a t E t a t D t E t a t = − = − = − ∫ ∞ −∞ ξ ξ ξ (2.1-7) D[ξ (t)]常记为 ( ) 2 σ t 。可见方差等于均方值与数学期望平方之差。它表示随机过 程在时刻 t 对于均值a(t)的偏离程度。 均值和方差描述了随机过程在各个孤立时刻的特征,为了描述随机过程在两 个不同时刻状态之间的联系,还需利用二维概率密度引入新的数字特征
c)相关函数 协方差函数定义为 B(12t2)=E5(1)-a(1)(t2)-a(2) =[Cx-a)x2-a(2)(x1x21)2 (2.1-8) 式中,t1与t2是任取的两个时刻。相关函数定义为 R(1,t2)=E[(t1)(12 x2/(x,x;11)d2 (2.1-9) 者关系为 B(t1,12)=R(t1212)-a(1)a(t2) (2.1-10) 若a(1)=0或a(t2)=0,则B(t1t2)=R(112)。若12>t1,并令12=1+r,则R(12t2)可 表示为R(t1,1+r)。这说明,相关函数依赖于起始时刻t及t2与t1之间的时间间隔r, 即相关函数是t1和r的函数。 由于B(112)和R(412)是衡量同一过程的相关程度的,因此,它们又常分别 称为自协方差函数和自相关函数。对于两个或更多个随机过程,可引入互协方差 及互相关函数。设(1)和m()分别表示两个随机过程,则互协方差函数定义为 Bn(1,2)=E5(1)-a(1)n(2)-an(t2 (2.1-11) 而互相关函数定义为 Rn(1t2)=E5(1)2) (2.1-12)
c) 相关函数 协方差函数定义为 { } 1 1 2 2 2 1 2 1 2 1 2 1 2 1 1 2 2 [ ( )][ ( )] ( , ; , ) ( , ) [ ( ) ( )][ ( ) ( )] x a t x a t f x x t t dx dx B t t E t a t t a t = − − = − − ∫ ∫ ∞ −∞ ∞ −∞ ξ ξ (2.1-8) 式中, 1 2 t 与t 是任取的两个时刻。相关函数定义为 1 2 2 1 2 1 2 1 2 1 2 1 2 ( , ; , ) ( , ) [ ( ) ( )] x x f x x t t dx dx R t t E t t ∫ ∫ ∞ −∞ ∞ −∞ = = ξ ξ (2.1-9) 二者关系为 ( , ) ( , ) ( ) ( ) 1 2 1 2 1 2 B t t = R t t − a t a t (2.1-10) 若a(t1 ) = 0或a(t2 ) = 0, 则 ( , ) ( , ) 1 2 1 2 B t t = R t t 。若 , 2 1 t > t 并令 , 2 1 t = t +τ 则 ( , ) 1 2 R t t 可 表示为 ( , ) 1 1 R t t +τ 。这说明,相关函数依赖于起始时刻 1t 及 与 之间的时间间隔τ 2 1 t t , 即相关函数是 和τ 1t 的函数。 由于 ( , ) ( , ) 1 2 1 2 B t t 和R t t 是衡量同一过程的相关程度的,因此,它们又常分别 称为自协方差函数和自相关函数。对于两个或更多个随机过程,可引入互协方差 及互相关函数。设ξ (t)和η(t)分别表示两个随机过程,则互协方差函数定义为 Bξη (t1 ,t2 ) = E{[ξ (t1 ) − aξ (t1 )][η(t2 ) − aη(t2 )]} (2.1-11) 而互相关函数定义为 ( , ) [ ( ) ( )] 1 2 1 2 R t t E ξ t η t ξη = (2.1-12)