第十章随机过程及其统计描述

第十章随机过程及其统计描述
第十章随机过程及其统计描述

第十章随机过程及其统计描述

本章首先从随时间演变的随机现象引入随机过程的概念和记号.接着,一般地介绍随机过程的统计描述方法.最后,作为示例,从实际问题抽象出两个著名的随机过程,并介绍它们的统计特性.

§1 随机过程的概念

随机过程被认为是概率论的“动力学”部分(J.Neyman,1960).意思是说,它的研究对象是随时间演变的随机现象.对于这种现象,一般来说,人们已不能用随机变量或多维随机变量来合理地表达,而需要用一族(无限多个)随机变量来描述.现在来看一个具体例子.热噪声电压电子元件或器件由于内部微观粒子(如电子)的随机热骚动所引起的端电压称为热噪声电压,它在任一确定时刻‘的值是一随机变量,记为y(,).不同时刻对应不同的随机变量,当时间在某区间,譬如上推移时,热噪声电压表现为一族随机变量,记为0,如图10—1,这个电压一时间函数在试验前是不可能预先确知的,只有通过测量才能得到.如果在相同条件下独立地再进行一次测量,则得到的记录是不同的.事实上,由于热骚

.328.

动的随机性,在相同条件下每次测量都将产生不同的电压——时间函数.这样,不断地独立重复地一次次测量就可以得到一族不同的电压—一时间函数,这族函数从另一角度刻划了热噪声电压.

现以上述例子为背景,引入随机过程的概念.

设了是一无限实数集.我们把依赖于参数的一族(无限多个)随机变量称为随机过程,记为,这里对每一个,X(”是一随机变量.丁叫做参数集.我们常把2看作为时间,称X(”为时刻¨寸过程的状态,而X(‘1)=J(实数)说成是,=小时过程处于状态J●对于一切,X(‘)所有可能取的一切值的全体称为随机过程的状态空间.

对随机过程进行一次试验(即在丁上进行一次全程观测),其结果是‘的函数,记为I((),‘仨了,称它为随机过程的一个样本函数或样本曲线.所有不同的试验结果构成一族(可以只包含有限个,如本节例1)样本函数.

随机过程可以看作是多维随机变量的延伸.随机过程与其样本函数的关系就象数理统计中总体与样本的关系一样.

依照上面的说法,热噪声电压的变化过程是一随机过程,它的状态空间是,一次观测到的电压一时间函数就是这个随机过程的一个样本函数.在以后的叙述中,为简便起见,常以X(,),表示随机过程.在上下文不致混淆的情形下,一般略去记号中的参数集丁.

‘329.

例1 抛掷一枚硬币的试验,样本空间是S={//,了},现藉此定义

其中尸(//)=尸(了)=1/2.对任意固定的‘,X(‘)是一定义在S上的随机变量;对不同的‘,X(‘)是不同的随机变量(见图10—2),所以{X(‘),J仨}是一族随机变量,即它是随机过程.另一方面,作一次试验,若出现//,样本函数;若出现了,样本函数为J:(,)=‘,所以该随机过程对应的一族样本函数仅包含两个函数:

.显然这个随机过程的状态空间为

.口

例2 考虑

式中。和oJ是正常数,田是在(o,27t)上服从均匀分布的随机变量.

显然,对于每一个固定的时刻‘=九,是一个随机变量,因而由(1.1)式确定的X(”是一个随机过程,通常称它为随机相位正弦波.它的状态空间是

在内随机地取一数,相应地即得这个随机过程的一个样本函数

.330.‘

图10一3中画出了这个随机过程的两条样本曲线.

例 3 在测量运动目标的距离时存在随机误差,若以表示在时刻;的测量误差,则它是一个随机变量.当目标随时间‘按一定规律运动时,测量误差也随时间;而变化,换句话说,是依赖于时间‘的——族随机变量,亦即{,‘≥0}是一随机过

程.且它们的状态空间是(一”,+(力).口

例4 没某城市的120急救电话台迟早会接到用户的呼叫,(”表示时间间隔内接到的呼叫次数,它是一个随机变量,且对于不同的‘≥0,X(‘)是不同的随机变量.于是,{X(¨,/≥0}是一随机过程.且它的状态空间是{0,1,2,…}.口

例5 考虑抛掷一颗骰子的试验.(㈠设是第n次(”≥1)抛掷的点数,对于”:1,2,…

的不同值,是不同的随机变量,因而{≥1>构成一随机过程,称为伯努利过程或伯努利随机序列.(㈠设是前”次抛掷中出现的最大点数,{,”≥1>也是一随机过程.它们的状态空间都是

工程技术中有很多随机现象,例如,地震波幅、结构物承受的风荷载、时间间隔

内船舶甲板“上浪”的次数、通讯系统和自控系统中的各种噪声和干扰,以及生物群体的生长等等变化过程都可用随机过程这一数学模型来描绘.不过,这些随机过程都不能像随机相位正弦波那样,很方便、很具体地用时间和随机变量(一

·331.

个或几个)的关系式表示出来,其主要原因在于自然界和社会产生随机因素的机理是极为复杂的,甚至是不可能被观察到的.因而,对于这样的随机过程(实际中大多是这样的随机过程).一般来说,我们只有通过分析由观察所得到的样本函数才能掌握它们随时间变化的统计规律性.

随机过程的不同描述方式在本质上是一致的.在理论分析时往往以随机变量族的描述方式作为出发点,而在实际测量和数据处理中往往采用样本函数族的描述方式.这两种描述方式在理论和实际两方面是互为补充的.

随机过程可依其在任一时刻的状态是连续型随机变量或离散型随机变量而分成连续型随机过程和离散型随机过程.热噪声电压、例2和例3是连续型随机过程,例1、例4和例5是离散型随机过程.

随机过程还可依时间(参数)是连续或离散进行分类.当时间集7’是有限或无限区间时,称为连续参数随机过程(以下如无特别指明,“随机过程”总是指连续参数而言的).如果了是离散集合,例如了=佃,1,2,…},则称为离散参数随机过程或随机序列,此时常记成{,,=o,1,2,…}等,如例5.

有时,为了适应数字化的需要,实际中也常将连续参数随机过程转化为随机序列处理.例如,我们只在时间集丁=上观察电阻热噪声电压y(¨,这

时就得到一个随机序列

其中.显然,当充分小时,这个随机序列能够近似地描述连续时间情况下的热噪声电压.

最后指出,参数‘虽然通常解释为时间,·但它也可以表示其它的量,诸如序号、距离等.例如,在例5中,我们假定每隔一个单位时间抛掷骰子一次,那么第n次抛掷时骰子出现的点数X。就相当

.332·

于‘=n时骰子出现的点数.

§2 随机过程的统计描述

随机过程在任一时刻的状态是随机变量,由此可以利用随机变量(一维和多维)的统计描述方法来描述随机过程的统计特性.

(一)随机过程的分布函数族给定随机过程{X(‘),‘仨7’}.对于每一个固定的‘仨了,随机变量X(‘)的分布函数一般与‘有关,记为

称它为随机过程{X(”,;仨了}的一维分布函数,而称为一维分布函数族.一维分布函数族刻画了随机过程在各个个别时刻的统计特性.为了描述随机过程在不同时刻状态之间的统计联系,一般可对任意n(n=2,3,…)个不同的时刻仨了,引入”维随机变量,它的分布函数记为

对于固定的n,我们称{Fx(;,}为随机过程{X<‘),‘正了}的n维分布函数族.

当n充分大时,n维分布函数族能够近似地描述随机过程的统计特性.显然,n取得愈大,则”维分布函数族描述随机过程的特性也愈趋完善.一般,可以指出(科尔莫戈罗夫定理):有限维分布函数族,即{Fx(;),n=1,2,,},

完全地确定了随机过程的统计特性.

在上一节,我们曾将随机过程按其状态或时间的连续或离散进行了分类.然而,随机过程的本质的分类方法乃是按其分布特性进行分类.具体地说,就是依照过程在不同时刻的状态之间的特殊

.333:了.

统计依赖方式,抽象出一些不同类型的模型,如独立增量过程、马尔可夫过程、平稳过程等.我们将在以后的章节中对它们作不同程度的介绍.·

(二)随机过程的数字特征随机过程的分布函数族能完善地刻画随机过程的统计特性,但是人们在实际中,根据观察往往只能得到随机过程的部分资料(样本),用它来确定有限维分布函数族是困难的,甚至是不可能的.因而像引入随机变量的数字特征那样,有必要引入随机过程的基本的数字特征——均值函数和相关函数等.我们将会看到,这些数字特征在一定条件下是便于测量的.下面就依次来介绍.

给定随机过程{X(J),‘仨了},固定9仨了,X(‘)是一随机变量,它的均值一般与‘有关,记为

我们称为随机过程{X(”,,仨f}的均值函数.

注意,是随机过程的所有样本函数在时刻,的函数值的平均值,通常称这种平均为集平均或统计平均,以区别将于第十二章中引入的时间平均概念.

均值函数表示了随机过程X(‘)在各个时刻的摆动中心,如图10—4所示.

.334·

其次,我们把随机变量X(t)的二阶原点矩和二阶中心矩分别记作

和·

并分别称它们为随机过程{X(‘),‘仨丁}的均方值函数和方差函数.方差函数的算术平方根

称为随机过程的标准差函数,它表示随机过程X(”在时刻,对于均值的平均偏离程度。见图10—4.

又设任意,:仨了.我们把随机变量X()和X()的二阶原点混合矩记作

并称它为随机过程{X(,),‘仨丁}的自相关函数,简称相关函数.记号在不致混淆的场合常简记为.

类似地,还可写出X(‘,)和X(/:)的二阶混合中心矩,记作

并称它为随机过程{X(”,,仨了}的自协方差函数,简称协方差函数.也常简记为.

由多维随机变量数字特征钓知识可知,自相关函数和自协方差函数是刻画随机过程自身在两个不同时刻的状态之间统计依赖关系的数字特征.

现把(2,1)一(2.5)式定义的诸数字特征之间的关系简述如下:

由(2.2)和(2.4)式知

由(2.5)式展开,得

·335.

特别,当21=‘:=‘时,由(2.7)式,得

由(2.6)~(2.8)式可知,以上诸数字特征中最主要的是均值函数和自相关函数.

从理论的角度来看,仅仅研究均值函数和白相关函数当然是不能代替对整个随机过程的研究的,但是由于它们确实刻画了随机过程的主要统计特性,而且远较有限维分布函数族易于观察和实际计算,因而对于应用课题而言,它们常常能够起到重要作用.据此,在随机过程的专著中都着重研究了所谓二阶矩过程.

随机过程{X(‘),‘仨了},如果对每一个‘仨了,二阶矩丘[X’(‘)]都存在,那么称它为二阶矩过程.

二阶矩过程的相关函数总存在.事实上,由于存在,根据柯西一施瓦兹不等式(参见第四章习题33)有

即知存在。

在实际中,常遇到一种特殊的二阶矩过程——正态过程.随机过程{X(‘),‘仨了}称为正态过程,如果它的每一个有限维分布都是正态分布,亦即对任意整数n≥1及任意仨了,服从,l维正态分布.由第四章§3、§4知,正态过程的全部统计特性完全由它的均值函数和自协方差函数(或自相关函数)所确定.例1 设丑,月是两个随机变量.试求随机过程X(‘)=丑r牛月,‘仨丁=(一oo,+O))的均值函数和自相关函数.如果A,B相互独立,且丑~N(0,1),丑~U(0,2),问X(9)的均值函数和自相关函数又是怎样的?

解X(2)的均值函数和自相关函数分别为

·336·

例2 求随机相位正弦波(§1例2)的均值函数、方差函数和自相关函数.

解由假设@的概率密度为

于是,由定义

而自相关函数

式中r=‘。一J1.特别,令‘:=‘。=‘,即得方差函数为

例3 设,其中止,刀是相互独立,且都服从正态分布N(0,·’)的随机变量,~是实常数.试证明X(‘)是正态过程,并求它的均值函数和自相关

·337·

函数.

解由题设丑、月是相互独立的正态变量,所以(A,月)是二维正态变量.对任意一组

实数仨了,

都是A,B的线性组合,于是根据第四章§4n维正态变量的性质3‘,

是n维正态变量,因为,2,9;是任意的,由定义,X(‘)是正态过程.另由题设丑(丑)=直(月)=丑(AB)=0,月(/4’)=互(月‘)=,’,由此可算得X(”的均值函数和自协方差函数(自相关函数)分别为:

(三)二维随机过程的分布函数和数字特征实际问题中,我们有时必须同时研究两个或两个以上随机过程及它们之间的统计联系.例如,某地在时段(o,‘]内的最高温度X(‘)和最低温度y(c)都是随机过程,需要研究它们的统计联系.又如,输入到一个系统的信号和噪声可以都是随机过程,这时输出也是随机过程,我们需要研究输出与输入之间的统计联系等等.对于这类问题,我们除了对各个随机过程的统计特性加以研究外,还必须将几个随机过程作为整体研究其统计特性.‘

设X(‘),y(‘)是依赖于同一参数‘正了的随机过程,对于不同的‘仨了,(X(,),y(‘))是不同的二维随机变量,我们称{(X(‘),y(J)),‘仨r}为二维随机过程.

给定二维随机过程是了中任意两组实数,我们称n+阴维随机变量

·338·

的分布函数·

为这个二维随机过程的n+阴维分布函数或随机过程X("与了(”的”+m维联合分布函数.同样可定义二维随机过程的n+阴维分布函数族和有限维分布函数族.·

关于数字特征,除了X(”,r(”各别的均值和自相关函数外,在应用课题中感兴趣的是X(‘)和y(”的二阶混合原点矩,记作

并称它为随机过程X(‘)和y(J)的互相关函数.

类似地,还有如下定义的X(‘)和y(”的互协方差函数:

如果二维随机过程(X(”,r(‘))对任意的f:,‘:仨了恒有

则称随机过程X(J)和r(‘)是不相关的.

由第四章§3可以推知,两个随机过程如果是相互独立的,且它们的二阶矩存在,则它们必然不相关.反之,从不相关一般并不能推断出它们是相互独立的.

当同时考虑”(n>2),个随机过程或"维随机过程时,我们可类似地引入它们的多维分布,以及均值函数和两两之间的互相关函数(或互协方差函数).

在许多应用问题中,经常要研究几个随机过程之和(例如,将信号和噪声同时输入到一个线性系统的情形)的统计特性.现考

.339·

虑三个随机过程X(‘),Y(J)和Z(‘)之和的情形.令

显然,均值函数

而Ⅳ(”的自相关函数可以根据均值运算规则和相关函数的定义得到.,

此式表明:几个随机过程之和的白相关函数可以表示为各个随机过程的自相关函数以及各对随机过程的互相关函数之和.

如果上述三个随机过程是两两不相关的,且各自的均值函数都为零,则由(2.11)式可知诸互相关函数均等于零,此时W(t)的自相关函数简单地等于各个过程的白相关函数之和,即

特别地,令,,=‘:=‘,由(2.12)式可得W(9)的方差函数(此处即均方值函数)为。

§3 泊松过程及维纳过程

泊松过程及维纳(Wiener)过程是两个典型的随机过程,它们在随机过程的理论和应用中都有重要的地位,它们都属于所谓独立增量过程,所以下面首先介绍独立增量过程.给定二阶矩过程{X(J),‘≥0},我们称随机变量X(t)一X(5),0≤‘<‘为随机过程在区间(;,门上的增量.如果对任意选定的正整数n和任意选定的

,n个增量

·340.

相互独立』tj称{X(㈠,2≥n}为独立增量过程.直观地说,它具有“在互不重叠的区间上.状态的增量是相互独立的”这一特征.

对于独立增量过程,可以证明:在X(0);o的条件下,它的有限维分布函数族可以由增量X(/)一X(5)(0≤;<‘)的分布所确定。

特别,若对任意的实数人和与X<”一X(5)具有相同的分布,则称增量具有平稳性.这时,增量X(t)一-了(5)的分布函数实际上只依赖于时间差;一,(0≤‘<¨,而不依赖于‘和;本身(事实上,令/l=一;即知L当增量具有平稳性时,称相应的独立增量过程是齐次的或时齐的.

接着,在X<㈨=0和方差函数为已知的条件下,我们来计算独立增量过程IX(‘),/≥0}的协方差函数.

记r(,)=X(‘)一心</).首先注意,当X(f)具有独立增量时,y(/)也具有独立增量;

其次,y(0)=0,丘,C)’(f)];0,且方差函数.利用这些性质,当0≤‘</时,就有

于是可知,对任意;,2≥门,协方差函数可用方差函数表示为

(一)泊松过程考虑下列随时间推移迟早会重复出现的事件:

(㈠自电子管阴极发射的电子到达阳极;·

(㈠意外事故或意外差错的发生;

(iii)要求服务的顾客到达服务站.此处“顾客”与“服务站”的含义是相当广泛的.例如,“顾客”可以是电话的呼叫,“服务站”是

’ ·341·

120急救台;“顾客’’可以是来领配件的汽车维修工,“服务站”是维修站配件仓库的管理员;“顾客”也可以是联网的个人电脑,“服务站”是某网站的主页等等.

为建立一般模型方便起见,我们把电子、顾客等看作时间轴卜的质点,电子到达阳极、顾客到达服务站等事件的发生相当于质点出现.于是抽象地说,我们研究的对象将是随时间推移,陆续地出现在时间轴上的许多质点所构成的随机的质点流.

以N(¨,‘≥0表示在时间间隔内出现的质点数(如§1例4中的呼叫数).是一状态取非负整数、时间连续的随机过程,称为计数过程.它的一个典型的样本函数如图10一5所示,图中是质点依次出现的时刻.

将增量,它表示时间间隔内出

现的质点数.“在内出现是个质点”,即是一事件,其概率记为

现假设N(‘)满足如下条件:

1’在不相重叠的区间上的增量具有独立性;

2‘对于充分小的AJ

·342.

其中常数且>0称为过程N(”的强度,而()当厶J一0时是关于的高阶无穷小;

3’对于充分小的,

亦即对于充分小的,在(t,t+)内出现2个或2个以上质点的概率与出现一个质点的概

率相比可以忽略不计;

4*N(0);0.

我们把满足条件1‘~4‘的计数过程{}称作强度为刀的泊松过程,相应的质点流或即质点出现的随机时刻称作强度为久的泊松流.以下首先来求出增量的分布律(3.2)。

对于泊松过程,我们注意到,结合条件2‘和

6=O

3*,有

下面就泊松过程来计算概率(3.2).

首先确定.为此,对>0,考虑

由条件1‘和(3.5)式,上式可写成

.343·

现以除上式两边,并令一0,即得满足的微分方程

因为,故=1.把它看作初始条件即可从方程(3.6)解得

再来计算,是≥1.根据和事件概率公式和条件1‘,有

由式(3.2)一(3.5),并注意到

上式可表示成

将此式适当整理后,两边除以,并令一0,就可得到满足的微分一差分方程

又因,故有初始条件

于是,在(3.8)、(3.9)中令是=l,并利用已求出的,即可解出

如此重复,即逐次令就可求得在内出现是个质点

.344·

的概率为

由上式易见增量的概率分布是参数为的泊松分布,且只与时间差有关,所以强度为久的泊松过程是一齐次的独立增量过程.在有些书中,泊松过程也用另一种形式定义,即若计数过程{N(”,‘≥0}满足下列三个条件:

(㈠它是独立增量过程;

(㈠对任意的

(iii)N(0)=0,·

那么称{N(‘),‘≥0}是一强度为且的泊松过程.

从前面的演算结果,不难看到从条件1‘一4‘可以推出(㈠一(iii).反之,在(“)中:令‘一‘。=出,并利用的泰勒级数展开。式,就能得到条件2‘和3’(详细推演由读者自己完成).由此,定义泊松过程的两组条件是等价的.

由(3.10)式,再由第四章§1,§2知

特别地,令‘。:0,由于假设N(0)=o,故可推知泊松过程的均值函数和方差函数分别为

从(3.11)式可以看到,,即泊松过程的强度且(常数)等于单位长时

间间隔内出现的质点数目的期望值.

关于泊松过程的协方差函数,则可由(3.1)、(3.11)式直接推得:

.345.

而相关函数

若条件(3.3)式中的强度为非均匀的,即且是时间‘的函数且=久(,),‘≥o.则称泊松过程为非齐次的.对于非齐次泊松过程,用类似的方法,可得

下面介绍与泊松过程有关的两个随机变量,即等待时间和点间间距,以及它们的概率分布.

在较多的实际问题中,通常对质点的观察,不是对时间间隔中出现的质点计数,而是对记录到某一预定数量的质点所需要的时间进行计时.例如,为研究含某种放射性元素的物质,常对它发射出来的粒子作计时试验.

一般,设质点(或事件)依次重复出现的时刻

是一强度为且的泊松流,{N(‘),‘≥0}为相应的泊松过程.以惯用记号记

是一随机变量,表示第”个质点(或事件第n次)出现的等待时间(见图10—6).为求出

的分布函数.首先注意,事件,所以

.346.

将它关于t求导,得的概率密度为

这就是说,泊松流(泊松过程)的等待时间服从厂分布.特别,质点(或事件)首次出现的等待时间服从指数分布:

它也是一个连续型随机变量,称为相继出现的第i—1个质点和第i个质点的点间间距(见图10一6).下面来求的分布.由,所以f:服从指数分布(3.13).对于i≥2,我们先求在第j一1个质点出现在时刻(即)的条件下,的条件分布函数:

.347.

从而知相应的条件概率密度为

于是随机变量的联合概率密度

此处为叫的概率密度.将此表达式关于积分,即得

的概率密度为

由(3.13)及(3.14)知,点间间距序列艮从同一个指数分布.理论上还:

是相互独立的随机变量.我们把这些结论写成如下的定理.

定理一强度为主的泊松流(泊松过程)的点间间距是相互独立的随机变量,且服从同一个指数分布(3.14).

它的逆命题也是成立的,我们不加证明地叙述如下:

定理二如果任意相继出现的两个质点的点间间距是相互独立,且服从同一个指数分布(3.14),则质点流构成了强度为且的泊松过程.

这两个定理刻画出了泊松过程的特征.定理二告诉我们,为要

.348·

确定一个计数过程是不是泊松过程,只要用统计方法检验点间间距是否独立,且服从同一个指数分布.

泊松过程或泊松流是研究排队理论的工具,在技术领域内它又是构造(模拟)一类重要噪声(散粒噪声)的基础.

(--)维纳过程维纳过程是布朗运动的数学模型.英国植物学家布朗(Brown)在显微镜下,观察漂浮在乎静的液面上的微小粒子,发现它们不断地进行着杂乱无章的运动,这种现象后来称为布朗运动.以Ⅳ(‘)表示运动中一微粒从时刻‘=o到时刻‘>o的位移的横坐标(同样也可以讨论纵坐标),且设W(0)=o.根据爱因斯坦(Enisten)1905年提出的理论,微粒的这种运动是由于受到大量随机的、相互独立的分子碰撞的结果.于是,粒子在时段

(与相继两次碰撞的时间间隔相比是很大的量)上的位移可看作是许多微小位核的代数和.\9然,依中小极限定Ig,偶窜待称W(2)一1V(;)为正态分布是合理的.其次,由于粒子的运动完全是由液体分子的不规则碰撞而引起的.这样,在不相重叠的时间间隔内,碰撞的次数、大小和方向可假定是相互独立的,这就是说位移n/(‘)具有独立的增量.另外,液面处于平衡状态,这时粒子在一时段上位移的概率分布可以认为只依赖于这时段的长度,而与观察的起始时刻无关,即W(2)具有平稳增量.

综合所述,可引入如下的数学模型:

给定二阶矩过程,如果它满足

1‘具有独立增量;;

2‘对任意的,增量

·349.

则称此过程为维纳过程.图10—7展示了它的一条样本曲线.

由2‘可知,维纳过程增量的分布只与时间差有关,所以它是齐次的独立增量过程.它也是正态过程.事实上,对任意n(n≥1)个时刻,把写成

根据l‘一3‘,它们都是独立的正态随机变量的和,由第四章§4中的n维正态变量的性质推知是n维正态变量,即是正态过程.因此,其分布完全由它的均值函数和自协方差函数(或自相关函数)所确定.根据条件2’,3‘可知,,由此可得维纳过程的均值与方差函数分别为

其中口‘称为维纳过程的参数,它可通过实验观察值加以估计.再根据(3.1)就可求得自协方差函数(自相关函数)为

维纳过程不只是布朗运动的数学模型,前面讲到的电子元件或器件在恒温下的热噪声也可归结为维纳过程.

泊松过程和维纳过程的重要性,不仅是因为实际中不少随时间演变的随机现象可以归结为这两个模型,而且在理论与应用中常利用它们构造出一些新的重要的随机过程模型.

小结

随机过程的研究对象是随时间演变的随机现象.简单地说,随机过程就是依赖于参数‘的一族(无限多个)随机变量,记为{X(‘),‘仨了},了为参数集.把‘看作时间,固定‘,称随机变量X(,)为随机过程在‘时的状态.对于一切‘正了,状态的所有可能·350.

取的值的全体称为随机过程的状态空间.

对随机过程进行一次试验(即在了上进行一次全程观测),其结果称为样本函数或样本曲线.所有不同的试验结果为一族(可以是有限个,如例1)样本函数.

随机过程统计描述方法的基点是:对每一个固定的2仨丁,X(c)是一个随机变量.我们知道”维随机变量可以用它们的联合分布来完整地刻画其统计特性.作为”维随机变量延伸的随机过程则必须用有限维分布函数族才能完整地刻画其统计特性.

计算随机过程{X(‘),‘仨了}的各种数字特征的方法与概率论中的方法完全一样,只要

把出现的参数等视为常数即可.随机过程最重要的数字特征是均值函数

,正了和自相关函数

其他的数字特征,如均方值函数、方差函数、标准差函数和自协方差函数都可用均值函数和自相关函数表出.计算数字特征在随机过程的理论和应用中仍占重要地位.希望读者重温并熟练掌握第四章§1中有关均值(数学期望)运算的种种性质.

给定一个二维随机过程.随机过程X(”与y(2)相互独立的含意是:对任意正整数,2,n2和任意参数和,n维随机

变量和阴维随机变量相互独立.随机过程X(‘)与r(c)不相关的含意是它们的互协方差函数:

最后我们介绍了两个都具有独立增量过程属性的具体模型:泊松过程{N(‘),‘≥0}和维纳过程{Ⅳ(‘),‘≥0}.从定义中可看到,它们差异仅在于:当0≤;<‘时,前者的增量

而后者的增量

·351.

它们的增量的分布都只与时间差‘一‘有关(即增量具有平稳性),所以实际上它们都属于齐次独立增量过程.

读者还需研究,在X(o)=o的条件下,怎样利用增量的独立性,从独立增量过程{X(‘),9≥0}的已知方差函数,推演出它的自协方差函数

并由此获得?白松过程和维纳过程的自协方差函数(自相关函数).

重要术语及主题

随机过程状态和状态空间样本函数(样本曲线) 有限维分布函数族均值函数方差函数自相关函数自协方差函数正态过程互协方差函数两个随机过程的独立性和不相关齐次(时齐)的独立增量过程泊松过程维纳过程

习题

1·利用抛掷一枚硬币的试验定义一随机过程

2.给定随机过程,c是任一实数,定义另一个随机过程

试将y(‘)的均值函数和自相关函数用随机过程X(‘)的一维和二维分布函数来表示.3.设随机过程其中/4是在区间(0,d)上服从均匀分布的随机变

量,试求X(”的均值函数和相关函数,

·352.

4.设随机过程X(”二X(随机变量试求X(z)的均值函数和协方差函数.

5.已知随机过程的均值函数和协方差函数是普通的函数.试求随机过程的均值函数和协方差函数.

6.给定一随机过程{X(/),‘仨了}和常数d,试以X("的自相关函数表出随机过程y(J)=X(9+d)一X(r),J正丁的自相关函数.

7.设Z(r)=X+n,.若已知二维随机变量(X,r)的协方差阵为

试求Z(”的协方差函数.

8.设X(t)=Az十月,,式中A、月是相互独立,且都服从正态N(o,02)分布的随机变量.试证明X(‘)是一正态过程,并求出它的相关函数(协方差函数).

9。设随机过程X(‘)与r(‘),‘仨7’不相关,试用它们的均值函数与协方差函数来表示随机过程

的均值函数和自协方差函数,其中d(‘)、/)(¨、‘(J)是普通的函数.

10.设X(J)和y“)(‘>0)是两个相互独立的、分别具有强度A和卢的泊松过程,试证

是具有强度久+卢的泊松过程.

11。设是以,’为参数的维纳过程,求下列过程的协方差函数:

.353·

《概率论与随机过程》第1章习题

《概率论与随机过程》第一章习题 1. 写出下列随机试验的样本空间。 (1) 记录一个小班一次数学考试的平均分数(设以百分制记分)。 (2) 同时掷三颗骰子,记录三颗骰子点数之和。 (3) 10只产品中有3只是次品,每次从其中取一只(取出后不放回),直到将3只次品都取出,记录 抽取的次数。 (4) 生产产品直到得到10件正品,记录生产产品的总件数。 (5) 一个小组有A ,B ,C ,D ,E5个人,要选正副小组长各一人(一个人不能兼二个职务),观察选 举的结果。 (6) 甲乙二人下棋一局,观察棋赛的结果。 (7) 一口袋中有许多红色、白色、蓝色乒乓球,在其中任意取4只,观察它们具有哪几种颜色。 (8) 对某工厂出厂的产品进行检查,合格的盖上“正品”,不合格的盖上“次品”,如连续查出二个次 品就停止检查,或检查4个产品就停止检查,记录检查的结果。 (9) 有A ,B ,C 三只盒子,a ,b ,c 三只球,将三只球装入三只盒子中,使每只盒子装一只球,观察 装球的情况。 (10) 测量一汽车通过给定点的速度。 (11) 将一尺之棰折成三段,观察各段的长度。 2. 设A ,B ,C 为三事件,用A ,B ,C 的运算关系表示下列事件。 (1) A 发生,B 与C 不发生。 (2) A 与B 都发生,而C 不发生。 (3) A ,B ,C 都发生。 (4) A ,B ,C 中至少有一个发生。 (5) A ,B ,C 都不发生。 (6) A ,B ,C 中至多于一个发生。 (7) A ,B ,C 中至多于二个发生。 (8) A ,B ,C 中至少有二个发生。 3. 设{}10,2,1, =S ,{}4,3,2=A ,{}5,4,3=B ,{}7,6,5=C ,具体写出下列各等式 (1)B A 。 (2)B A ?。 (3)B A 。 (4) BC A 。 (5))(C B A ?。 4. 设{}20≤≤=x x S ,??????≤<=121x x A ,? ?????<≤=234 1x x B ,具体写出下列各式。 (1)B A ?。 (2)B A ?。 (3)B A 。 (4) B A 。 5. 设A ,B ,C 是三事件,且41)()()(===C P B P A P ,0)()(==CB P AB P ,81)(=AC P ,求A , B , C 至少有一个发生的概率。 6. 在1500个产品中有400个次品,1100个正品,任意取200个。 (1) 求恰有90个次品的概率。 (2) 至少有2个次品的概率。 7.(1)在房间里有500个人,问至少有一个人的生日是10月1日的概率是多少(设一年以365天计算)? (2)在房间里有4个人,问至少有二个人的生日在同一个月的概率是多少?

2011-2012第一学期数理统计与随机过程(研)试题

北京工业大学2011-2012学年第一学期期末 数理统计与随机过程(研) 课程试卷 学号 姓名 成绩 注意:试卷共七道大题,请写明详细解题过程。数据结果保留3位小数。 考试方式:半开卷,考试时只允许看教材《概率论与数理统计》 浙江大学 盛 骤等编第三版(或第四版)高等教育出版社,不能携带和查阅任何其他书籍、纸张、资料等。考试时允许使用计算器。 考试时间120分钟。考试日期:2012年1月10日 1.(10分)某种导线要求其电阻的标准差不得超过0.005(Ω),今在生产的一批该种导线中取9根,测得)(007.0Ω=s . 设总体服从正态分布,问从这些样本看这批导线是否合格?(取显著性水平α=0.05) 2. (15分)袋中装有8只球,其中红、白球若干.在其中任取3只,记录红球的个数X ,然后放回,再任取3只,记录红球的个数,然后放回。如此重复进行了112次。其结果如下: 试检验假设: {}.3,2,1,0,38335:383350=??? ? ?????? ??-???? ??===-k k k C C C k X P X H k k 服从超几何分布: 是否成立?(取显著性水平050.=α)

3. (1) (2) 因素A 和因素B 各包含几个水平?总共涉及了多少个观测数据? (3) 从这个方差分析表中可以做出那些假设检验?取显著性水平050.=α,结论是什么?分别写出完整的推断依据. 4. (1)(2) 对回归方程进行显著性检验(取显著性水平α=0.05); (3) 求y 的置信水平为95%的预测区间,并计算若x=5时y 的95%的预测区间。 5.(15分)假定某天文台观察到的流星流是一个强度为λ的泊松过程,据以往资料统计为每小时平均观察到3颗流星。试求: (1)在上午8点到12点期间,该天文台没有观察到流星的概率? (2)从零点开始,该天文台观察首次观察到第一颗流星的时间的分布函数?

概率统计与随机过程复习提纲

概率统计与随机过程 课程编号:H0600071S学分: 4 开课学院:理学院课内学时:64 课程类别:学科基础课课程性质:必修 一、课程的性质和目的 课程性质:本课程是我校有关专业的学科基础课 目的:通过本课程的学习,使学生系统地掌握概率论、数理统计和随机过程的基本理论和基本方法,为后续各专业基础课和专业课的学习提供必要的数学理论基础。另外,通过本课程的系统教学,特别是讲授如何提出新问题、思考分析问题,培养学生的抽象思维能力、逻辑推理能力以及解决实际问题的能力,从而逐步培养学生的创新思维能力和创新精神。 二、课程教学内容及基本要求 (一)课程教学内容及知识模块顺序 第一章概率论的基本概念 8学时 (1)随机试验 (2)样本空间、随机事件 (3)频率与概率 (4)等可能概型(古典概型) (5)条件概率 (6)独立性 教学基本要求: 了解随机现象与随机试验,了解样本空间的概念,理解随机事件的概念,熟练掌握事件之间的关系与运算。了解事件频率的概念,理解概率的统计定义。了解概率的古典定义,会计算简单的古典概率。了解概率的公理化定义,熟练掌握概率的基本性质,会运用这些性质进行概率计算。理解条件概率的概念、概率的乘法定理与全概率公式,会应用贝叶斯(Bayes)公式解决比较简单的问题。理解事件的独立性概念。理解伯努利(Bernoulli)概型和二项概率的计算方法。 第二章随机变量及其分布 6 学时 (1)随机变量 (2)离散型随机变量及其分布律 (3)随机变量的分布函数 (4)连续型随机变量及其概率密度 (5)随机变量的函数的分布 教学基本要求: 理解随机变量的概念,了解分布函数的概念和性质,会计算与随机变量相联系的事件的概率。理解离散型随机变量及其分布律的概念,熟练掌握0-1分布、二项分布和泊松(Poisson)分布。理解连续型随机变量及其概率密度的概念,熟练掌握正态分布、均匀分布和指数分布。会根据自变量的概率分布求简单随机变量函数的概率分布。

完整word版,2007-2008第一学期数理统计与随机过程(研)试题-2007

北京工业大学2007-2008学年第一学期期末 数理统计与随机过程(研) 课程试题 学号 姓名 成绩 注意:试卷共七道大题,请将答案写在答题本上并写明题号与详细解题过程。 考试时间120分钟。考试日期:2008年1月10日 一、(10分)已知在正常生产的情况下某种汽车零件的重量(克)服从正态分布 ),(254σN ,在某日生产的零件中抽取10 件,测得重量如下: 54.0 55.1 53.8 54.2 52.1 54.2 55.0 55.8 55.1 55.3 问:该日生产的零件的平均重量是否正常(取显著性水平050.=α)? 二、 (15分)在数 14159263.=π的前800位小数中, 数字93210,,,,, 各出现的次数记录如下 检验这10个数字的出现是否是等概率的?(取显著性水平050.=α) 三、(15分)下表给出了在悬挂不同重量(单位:克)时弹簧的长度(单位:厘米) 求y 关于x 的一元线性回归方程,并进行显著性检验. 取显著性水平050.=α, 计算结果保留三位小数. 四、(15分)三个工厂生产某种型号的产品,为评比质量,分别从各厂生产的产品中随机抽取5只作为样品,测得其寿命(小时)如下:

在单因素试验方差分析模型下,检验各厂生产的产品的平均寿命有无显著差异?取显著性水平050.=α, 计算结果保留三位小数. 五、(15分)设}),({0≥t t N 是强度为3的泊松过程, 求(1)})(,)(,)({654321===N N N P ; (2)})(|)({4365==N N P ; (3)求协方差函数),(t s C N ,写出推导过程。 六、(15分)设{,}n X n T ∈是一个齐次马尔可夫链,其状态空间{0,1,2}I =,一步 转移概率矩阵为 121414201335250P ?? ? = ? ??? (1)求}|,,,,{202021054321======X X X X X X P ; (2)求}|{122==+n n X X P ; (3)证明此链具有遍历性(不必求其极限分布)。 七、(15分)设有随机过程 )sin()cos()(t B t A t X ππ+=,其中A 与B 相 互独立且都是均值为零,方差为2σ的正态随机变量, (1)分别求)(1X 和)(4 1 X 的一维概率密度; (2)问)(t X 是否是平稳随机过程? 标准答案(仅供参考) 一、(10分)已知在正常生产的情况下某种汽车零件的重量(克)服从正态分布 ),(254σN ,在某日生产的零件中抽取10 件,测得重量如下: 54.0 55.1 53.8 54.2 52.1 54.2 55.0 55.8 55.1 55.3 如果标准差不变,该日生产的零件的平均重量是否有显著差异(取05.0=α)? 解:按题意,要检验的假设是 54:0=μH ,因2σ未知,故用-t 检验法,由05.0=α,查t 分布表得临界 值2622290250.)(.=t ,由样本值算得 382514654.,.==t x

《概率论与随机过程》课程自学内容小结

大学2015~2016学年秋季学期本科生 课程自学报告 课程名称:《概率论与随机过程》 课程编号:07275061 报告题目:大数定律和中心极限定理在彩票选号的应用学生: 学号: 任课教师: 成绩: 评阅日期:

随机序列在通信加密的应用 2015年10月10日 摘 要:大数定律与中心极限定理是概率论中很重要的定理,较多文献给出了不同条件下存在的大数定律和中心极限订婚礼,并利用大数定律与中心极限定理得到较多模型的收敛性。但对于他们的适用围以及在实际生活中的应用涉及较少。本文通过介绍大数定律与中心极限定理,给出了其在彩票选号方面的应用,使得数学理论与实际相结合,能够让读者对大数定律与中心极限定理在实际生活中的应用价值有更深刻的理解。 1. 引言 在大数定律与中心极限定理是概率论中很重要的定理,起源于十七世纪,发展到现在,已经深入到了社会和科学的许多领域。从十七世纪到现在,很多国家对这两个公式有了多方面的研究。长期以来,在大批概率论统计工作者的不懈努力下,概率统计的理论更加完善,应用更加广泛,如其在金融保险业的应用,在现代数学中占有重要的地位。 本文主要通过对大数定律与中心极限定理的分析理解,研究探讨了其在彩票选号中的应用,并给出了案例分析,目的旨在给出大数定律与中心极限定理应用对实际生活的影响,也对大数定律与中心极限定理产生更深刻的理解。 2. 自学容小结与分析 2.1 随机变量的特征函数 在对随机变量的分析过程中,单单由数字特征无法确定其分布函数,所以引入特征函数。特征函数反映随机变量的本质特征,可唯一的确定随机变量的分布函数、随机变量X 的特征函数定义为: 定义1 ][)()(juX jux e E dx e x p ju C ==? +∞ ∞ - (1) 性质1 两两相互独立的随机变量之和的特征函数等于各个随机变量的特征函数之积。 性质1意味着在傅立叶变换之后,时域的卷积变成频域的相乘,这是求卷积的简便方法。类比可知求独立随机变量之和的分布的卷积,可化为乘法运算,这样就简便了计算,提高了运算效率。 性质2 求矩公式:0)(|) ()(][=-=u n u x n n n du C d j X E (2) 性质3 级数展开式:!)(][!|)()()(0 00n ju X E n u du u C d u C n n n n n n n n X ∑∑∞ ==∞ === (3) 2.2 大数定律与中心极限定理 定义2 大数定律:设随机变量相互独立,且具有相同的μ=)(k X E 和,...2,1,)(2 ==k X D k σ, 则0∈>?,有

【免费下载】第一学期数理统计与随机过程研试题答案

北京工业大学2009-20010学年第一学期期末数理统计与随机过程(研) 课程试卷一、随机抽取某班28名学生的英语考试成绩,算得平均分数为80=x 分,样本标准差8=s 分,若全年级的英语成绩服从正态分布,且平均成绩为85分,问:能否认为该班的英语成绩与全年级学生的英语平均成绩有显著差异(取显著性水平)?050.=α解:这是单个正态总体),(~2σμN X ,方差2σ未知时关于均值μ的假设检验问题,用T 检验法. 解 85:0=μH ,85:1≠μH 选统计量 n s x T /0μ-=已知80=x ,8=s ,n =28,850=μ,计算得n s x T /0μ-=31.328/88580=-=查t 分布表,05.0=α,自由度27,临界值.052.2)27(025.0=t 由于,故拒绝0H ,即在显著水平05.0=α下不能认为该班的英语 052.2>T 2622.2>成绩为85分.二、某图书馆每分钟借出的图书数有如下记录:借出图书数 k 0 1 2 3 4 5 6≥7频数 f 8 16 17 10 6 2 1 0试检验每分钟内借出的图书数是否服从泊松分布? (取显著性水平) 050.=α解:由极大似然估计得.2?==x λ在X 服从泊松分布的假设下,X 的所有可能的取值对应分成两两不相交的子集A 0, A 1,…, A 8。则有估计 }{k X P ==i p ? ,7,0,!2}{?2===-k k e k X P k =0?p 三、某公司在为期10年内的年利润表如下: 年份 1 2 3 4 5 6 7 8910利润 1.89 2.19 2.06 2.31 2.26 2.39 2.61 2.58 2.82 2.9 通过管线敷设技术,不仅可以解决有设备高中资料试卷相互作用与相互关系,根据生产工艺高中资料试卷要求,对电力保护装置调试技术,电力保护高中资料试卷配置技术是指机

数理统计与随机过程试题

一、(10分)某工程部队的工程师向领导建议,他提出的一项新工艺在不降低工程质量和影响工程进度的同时,还将节省机器运转的开支。假如采用旧工艺时机器每星期运转开支平均是1000元,又假定新旧工艺机器每星期运转开支X 都是服从正态分布,且具有标准差250元。使用新工艺后观察了9个星期,其机器运转开支平均每星期是750元。试在01.0=α的水平下,检验工程师所述是否符合实际,即新工艺是否能节省开支。 (3554.3)8(005.0=t ,8965.2)8(01.0=t ,57.2005.0=u ,33.201.0=u ) 二、(12分)设母体 X 服从正态分布),(2σμN ,X 是子样),,,(21n X X X Λ的平均数, ∑=-=n i i n X X n S 1 2___ 2 )1(是子样方差,又设),(~21σμN X n +,且与n X X X ,,,21Λ独立,求: (1)X E ,X D ,2 n ES ,2n DS ;(2)统计量 1 1 1+--+n n S X X n n 的分布。 三、(13分)一个罐中装有黑球和白球,其中黑球、白球的个数均未知,如何用统计的方法估计其中黑球与白球的比例。(建立模型并给出两种估计方法) 四、(15分)以下为温度对某个化学过程的生产量的影响的数据: 已知 X 和Y 之间具有线性依赖关系。 (1)写出其线性回归模型,并估计参数βα,; (2)讨论回归系数的性质(分布)。 五、(10分)设有一随机过程)( t X ,它的样本函数为周期性的锯齿波。下图(a )、(b )画出了二个样本函数图。各样本函数具有同一形式的波形,其区别仅在于锯齿波的起点位置不同。设在0=t 后的第一个零值点位于0τ,0τ是一个随机变量,它在) , 0 ( T 内均匀分布,即 ?????≤≤=其它值 00 1 )( 0T t T t f τ

学期数理统计与随机过程(研)试题(答案)

北京工业大学2009-20010学年第一学期期末 数理统计与随机过程(研) 课程试卷 学号 姓名 成绩 注意:试卷共七道大题,请写明详细解题过程。 考试方式:半开卷,考试时只允许看教材《概率论与数理统计》 浙江大学 盛 骤等编第三版(或第二版)高等教育出版社。可以看笔记、作业,但不允许看其它任何打印或复印的资料。考试时允许使用计算器。考试时间120分钟。考试日期:2009年12月31日 一、随机抽取某班28名学生的英语考试成绩,算得平均分数为80=x 分,样本标准差8=s 分,若全年级的英语成绩服从正态分布,且平均成绩为85分,问:能否认为该班的英语成绩与全年级学生的英语平均成绩有显著差异(取显著性水平050.=α)? 解:这是单个正态总体 ),(~2σμN X ,方差2σ未知时关于均值μ的假设检验问题,用T 检验法. 解 85:0=μH ,85:1≠μH 选统计量 n s x T /0 μ-= 已知80=x ,8=s ,n =28,850=μ, 计算得n s x T /0μ-= 31 .328/885 80=-= 查t 分布表,05.0=α,自由度27,临界值052.2)27(025.0=t . 由于052.2>T 2622.2>,故拒绝 0H ,即在显著水平05.0=α下不能认为 该班的英语成绩为85分.

050.= 解:由极大似然估计得.2?==x λ 在X 服从泊松分布的假设下,X 的所有可能的取值对应分成两两不相交的子集A 0, A 1,…, A 8。 则}{k X P =有估计 =i p ?ΛΛ,7,0, !2}{?2 ===-k k e k X P k =0?p

浙江大学《概率论、数理统计与随机过程》课后习题答案张帼奋主编第七章数理统计习题__奇数

注意: 这是第一稿(存在一些错误) 第七章数理统计习题__奇数.doc 1、解 由θ θθμθ 2 ),()(0 1===? d x xf X E ,204103)(2 221θθθ=-==X D v ,可得θ的矩估计量为X 2^ =θ,这时θθ==)(2)(^X E E ,n n X D D 5204)2()(2 2 ^ θθθ= ? ==。 3、解 由)1(2)1(2)1(2)(21θθθθμ-=-+-==X E ,得θ的矩估计量为: 3 2 62121^ =-=- =X θ。 建立关于θ的似然函数:482232)1(4)1())1(2()()(θθθθθθθ-=--=L 令014 8))1ln(4ln 8()(ln =--=?-+?=??θ θθθθθθL , 得到θ的极大似然估计值:32^=θ 5、解 由33)1(3)1(3)(222+-=-+-+=p p p p p p X E ,所以得到p 的矩估计量为 ^ 32p = = 建立关于p 的似然函数:32 10)1()2 )1(3()()2)1(( )(22n n n n p p p p p p p L ---= 令0)(ln =??p p L ,求得到θ的极大似然估计值:n n n n p 222 10^++= 7、解 (1)记}4{<=X P p ,由题意有}4{}4{}4{-≤-<=<=X P X P X P p 根据极大似然估计的不变性可得概率}4{<=X P p 的极大似然估计为: 4484.05.0)6 4 ()64( 5.0)25 /2444( )25 /2444( 22^ =-Φ=-Φ-=--Φ--Φ=s s p (2)由题意得:)6 24 ( )25 /244( }{}{105.012-Φ=-Φ=≤=>-=-A s A A X P A X P ,于是经查表可求得A 的极大似然估计为0588.12^ =A

数理统计与随机过程复习题

数理统计与随机过程复习资料第1章抽样与抽样分布 1. 设母体,是来自母体的一个子样,若 问C为何值时,CY服从t分布,并给出其自由度。 2. 设母体,是来自母体的一个容量为6的子样,设 ,求常数C,使CY服从分布。

3. 设是来自总体的简单样本,记为前个样本的均值和方差,试求 证:。 第2章参数估计 1. 设母体(二项分布),其中:N已知,p是未知参数。求p的最大似 然估计量。并确定所得估计量的无偏性和相合性。

2. 设母体(二项分布),求参数N,p的矩估计量。 3. 设为母体的一个子样,,当为何值时,Y为的无偏估计量且方差最 小。 4. 设为母体的一个子样,,当满足什么条件时,Y为的无偏估计量, 并求方差。

5. 设为母体的一个子样,求常数C,使为的无偏估计。 6. 设母体X的密度函数为 a与b为参数,求a与b的矩估计。

7. 设母体(正态分布),其中:和为参数。求和的最大似然估计量。 并确定所得估计量的无偏性;若是有偏,进行修正。 8.设母体X的分布密度为 ,其中,求参数的最大似然估计量。 9. 设母体(均匀分布),为参数,为母体的一个子样,,求参数的置 信概率的置信区间。

10. 设母体(正态分布),其中为未知参数,为母体的一个子样,求母 体平均数的置信概率为的置信区间。 11. 两台机床加工同一种零件,分别抽取6个和9个零件,测量其长度计 算得到.。假定各台机床零件长度服从正态分布。求两个母体方差比的置信区间(=0.95)。 12.设是取自总体的一个样本,总体X的密度函数为 (1)求的矩估计和极大似然估计; (2)的矩估计和极大似然估计是否为无偏的。

数理统计与随机过程讲义

第四章 假设检验 假设检验是一种重要应用价值的统计推断形式,是数理统计的分支。从发展历史上有重要的节点为 1 :Pearson 的拟合优度的2χ检验 1900 2:Fisher 的显著性检验 1920 3:Neyman-Pearson 一致最优检验 1928 4:Wald 的判决理论 1950 5:Bayes 方法 (二战之后发展的学派) §4.1 基本术语 关于随机变量的分布、数字特征等,每一种论断都称为统计假设,分为参数假设和非参数假设,例如),(~2σu N X ,假设1,1:==σu H 就称为参数假设;给定一组样本值,假设:H ~X 正态分布,对于分布进行论断,为非参数假设。 无论上面那种假设,都是给出一个对立的假设,比如),(~2σu N X ,那么假设1,1:0==σu H 的对立假设就是1,1:1≠≠σu H ,我们就把0H 称为基本假设,或者原假设,而1H 就称为对立(备选)假设。 为了分别那个假设是对的,需要判断假设真伪,就是对假设做出“否”还是“是”的程序就是检验,这个检验常用否定域形式给出,按照一定规则把样本值集合分成两个部分V V ?,当样本值落入子集V 认为0H 不真,那么V 是0H 的否定域,V 为0H 的接受域。 那么这样就产生了两种错误: 第一类错误α :本来0H 是真,但是却否定了,弃真; 第二类错误β :本来0H 不真,但是却接受为真,叫取伪。 选定一种检验方法,我们希望上述两种错误概率都小。但是给定样本容量,使得两种错误任意小是不可能的,我们主要研究两大类检验方法:

1:样本容量给定,控制第一类错误,使得错误概率有一个上界α,叫做检验的显著性水平,根据这种原则建立的检验就是α水平显著性检验; 2:样本容量给定,控制第一类错误α水平固定,还使得第二类错误最小,就是接受不真实假设的概率最小,否定不真实假设的概率就称为检验功效1-β,使得功效最大,,根据这种原则建立的检验就是α水平最大功效检验,或者最佳检验。 §4.2参数假设检验 设X 符合分布),(θx F ,未知参数θΘ∈参数空间,空间分成两部分0Θ和 Θ-0Θ,二者交集为空。 主要对于正态分布参数的统计假设的显著性检验方法。 1)针对不同问题,提出基本假设与备选假设 0H :θ0Θ∈ 1H :θ0Θ-Θ∈ 如果参数空间仅仅是由0θθ=和1θθ=两个点组成的,那么我们称简单假设,否则是复合假设。 2)给定检验的显著性水平α,其大小依据不同问题不同,比如火箭、飞机等可靠性问题,α要越小越好,对于一般生产问题,太小了则意味着生产时间和成本的增加; 3)建立对于基本假设的统计量和否定域; 4)取样,计算统计量值,落入否定域则判读0H 为假,否则为真。 例子:某种药片制剂中国家规定成分A 的含量X 必须为10%,现在抽取5个片剂试样,测得A 的含量为 10.9% 9.45% 10.38% 9.61% 9.92% 假设)%,10(~20σ=u N X ,按照显著性水平α=0.05进行检验是否与规定10%相符? 解:建立基本假设0H :0u u =,这里显著性水平α=0.05,样本容量为5,样本值如上。 如何确定统计量呢?样本均值X 可以求出,但是这里方差未知,用无偏估 计量* 2n S 来代替2σ,那么统计量 = t )1(~/* 20--n t n S u X n

(完整版)2012-2013《概率论与随机过程试题》期末考试试题答案

北京邮电大学2012——2013学年第1学期 《概率论与随机过程试题》期末考试试题答案 考试注意事项:学生必须将答题内容(包括填空题)做在试题答题纸上,做在试卷纸上一律无效。在答题纸上写上你的班号和选课单上的学号,班内序号! 一. 单项选择题和填空题:(每空3分,共30分) 1.设A 是定义在非空集合Ω上的集代数,则下面正确的是 .A (A )若A B ∈∈A,A ,则A B -∈A ; (B )若A A B ∈?A,,则B ∈A ; (C )若12n A n =∈?A,,,,则 1 n n A ∞=∈A ; (D )若12n A n =∈?A,,,,且123A A A ??? ,则 1 n n A ∞ =∈A . 2. 设(),ΩF 为一可测空间,P 为定义在其上的有限可加测度,则下面正确的是 .c (A )若A B ∈∈F,F ,则()()()P A B P A P B -=-; (B )若12n A n =∈?F,,,,,且123A A A ??? ,则1 li ( )()m n n n n P A A P ∞→∞ ==; (C )若A B C ∈∈∈F,F,F,,则()()()()P A B C P A P AB P A BC =++; (D )若12n A n =∈?F,,,,,且,i j A i j A =??=/,1 1 ( )()n n n n P P A A ∞ ∞===∑. 3.设f 为从概率空间(),P ΩF,到Borel 可测空间(),R B 上的实可测函数,表达式为100 0()k A k f kI ω==∑,其中1000 ,, i j n n i j A A A ==??=Ω/=,则fdP Ω=? ;

概率论与随机过程题集

第二章 概率论与随机过程 2-16 图P2-16中的电路输入为随机过程X(t),且E[X(t)]=0,xx φ(τ) =2 σδ(τ),即X(t)为白噪 过程。 (a )试求谱密度yy Φ(f )。 (b )试求yy φ(τ)和E[Y 2(t)]。 图P2-16 解:(a )xx φ= 2222)()(σττδσττφτπτπ==?? +∞ ∞ --+∞ ∞ --d e d e f j f j xx 又系统函数)(f H = ) () (f X f Y =fc j fc j R fc j πππ2112121 +=+ ∴2 2222 22 2 41)2(11)()()(c f R fcR f H f f xx yy πσπσφφ+= +== (b) E [)(2 t y ]=)0(yy φ τπττ πσπσφτφRc f j f j yy yy e Rc df e c f R df e f 12 22 2 2 2 2 2241)()(- ∞ +∞ -∞ +∞ -= +==? ? ∴E [)(2 t y ]=Rc yy 2)0(2 σφ= 2-20 一离散时间随机过程的自相关序列函数是k k )2/1()(=φ,试求其功率密度谱。 解:由功率密度谱的定义知 )(f Φ= ∑+∞ -∞=-k fk j e k πφ2)( = ∑+∞ -∞=-k fk j k e π2)2 1(

=fk j k k e π21 )21(----∞=∑+fk j k k e π2 )21 (-+∞ =∑ =k f j k e )21(21π∑+∞ =+k f j k e )21(20π-+∞=∑ =f j f j e e ππ2221121-+f j e π22111 -- ∴ )(f Φ =f j f j e e ππ2221121-+f j e π22 111-- 即为所求。 2-23 试证明函数 )(t f k = ) 2(2)] 2(2sin[W k t W W k t W -- ππ,k = 0,1±,2±,… 在区间[+∞∞-,]上为正交的,即 所以,抽样定理的重建公式可以看作带限信号)(t s 的级数展开式,其中权值为)(t s 的样值,且{)(t f k }是级数展开式中的正交函数集。 证明: 由题得 ? +∞ ∞ -dt t f t f j k )()(=? +∞ ∞ -)2(2)]2(2sin[W k t W W k t W -- ππ ) 2(2)]2(2sin[W j t W W j t W --ππdt = ? +∞ ∞ -2 1)2)(2(] )(4cos[)cos[(j wt k wt j k wt k j πππππππ--+---dt ∴命题得证。 2-24 系统的噪声等效带宽定义为 ?∞= 02 )(1df f H G B eq

概率统计与随机过程第一章(第二节)几何统计概率的定义

第一章随机事件的概率 第二节概率的定义及性质 二.概率的几何定义 古典概率的局限性: 基本事件总数有限,各个基本事件发生的可能性相同. 对基本事件总数无限的情形,古典概率就不适用了. 概率的古典定义是以试验的基本事件总数有限和基本事件等可能发生为基础的。对于试验的基本事件有无穷多个的情形,概率的古典定义显然不适用了。为了研究基本事件有无穷多个而又具有某种等可能性这样的一类随机试验,需要用几何方法来引进概率的几何定义。

先从几个简单的例子开始。 例1 某公共汽车站每隔十分钟有某一路公交汽车到达,乘客到达汽车站的时刻是任意地.求一个乘客候车时间不超过三分钟的概率. 例2 如果在一个5万平方公里的海域里有表面积达40平方公里的大陆架贮藏着石油,假如在这海域里随意选定一点钻探,问钻到石油的概率是多少? 例3 在400毫升自来水中有一个大肠杆菌,今从中随机取出2毫升水样放到显微镜下观察,求发现大肠杆菌的概率。 一种相当自然的答案是认为 ;例2中钻到例1所求的概率等于3 10 8;而例3所求的石油的概率等于 10000 1。在求这些概率时,我概率等于 200

们事实上利用了几何的方法,并假定了某种等可能性。 在例1中,乘客候车时间的区间为[0,10],且取各点的可能性一样; 候车的时间短于3分钟,也就是候车时间的区间为[0,3],相应的概率应是310 。 在例2中,由于选点的随机性,可以认为该海域中各点被选中的可能性是一样的,因而所求概率自然认为等于贮藏油域的面积与整个海域面积之比,即等于1000085000040=。 同样地,例3中由于取水样的随机性,所求概率等于水样的体积与总体积之比 20014002= 。

浙江大学《概率论、数理统计与随机过程》课后习题答案张帼奋主编第三章概率论习题_奇数

第三章多维随机变量及其概率分布 注意:这是第一稿(存在一些错误) 第三章概率论习题__奇数.doc 1、解互换球后,红球的总数是不变的,即有6X Y +=,X 的可能取值有:2,3,4,Y 的取值为:2,3,4。则(,)X Y 的联合分布律为: (2,2)(2,3)(3,2)(3,4)(4,3)(4,4)0 PX Y PX Y PX Y PX Y PX Y PX Y ==================236(2,4)(4,2)5525 P X Y P X Y ======?=223313(3,3)555525 P X Y ===?+?=由于6X Y +=,计算X 的边际分布律为: 6(2)(2,4)25 P X P X Y =====13(3)(3,3)25 P X P X Y =====6(4)(4,2)25 P X P X Y =====3、解利用分布律的性质,由题意,得 0.10.10.10.11 a b c ++++++=(0,2)(0,1)0.1{0|2)0.5(2)(1)0.1P Y X P Y X a P Y X P X P X a b ≤<≤=+≤<====<=++{1}0.5 P Y b c ==+=计算可得:0.2a c ==0.3 b =于是X 的边际分布律为: (1)0.10.6 P X a b ==++=(2)0.10.10.20.4 P X c c ==++=+=Y 的边际分布律为 (1)0.10.3P Y a =-=+=,(0)0.2 P Y ==(1)0.5 P Y b c ==+=5、解(1)每次抛硬币是正面的概率为0.5,且每次抛硬币是相互独立的。由题意知,X 的

《数理统计与随机过程讲义》

《数理统计与随机过程讲义》 段法兵 复杂性科学研究所 第一章 概率论回顾 下面是数理统计部分需要的掌握的,许多推导的基础知识。 §1.1 几种分布的由来 指数分布:服务台电话呼叫时间,公交车到达一个车站时间,这些时间分布的符合指数分布。设)(t q 为区间t 上没有事件发生的概率,x 为第一次事件发生等待的时间,那么)()(t x P t q >=,假设不同时间区间1t ,2t 相互不重叠且独立,那么 )()()(2121t t x P t x P t x P +>=>> ?)()()(2121t t q t q t q += ?t e t q λ-=)(为非平凡(非零)有界解,这里λ为状态转移概率 那么我们有分布函数 t e t q t x P t x P t F λ--=-=>-=≤=1)(1)(1)()( 因此得到指数分布 ???≥==-other t e dt t dF t f t 0 0)()(λλ 两个指数分布之和的分布? y x z += 在x-y 的空间内,满足z y x ≤+的区域如上,那么z 的累计分布 Y

{}? ?-=≤+=y z xy z dx y x f dy z y x P z F 0 ),()( 那么 ?-== z y x z dx x z f x f dz z dF z f 0)()() ()( 例如x 与y 为相互独立的指数分布,x x e x f λλ-=)(和y y e y f λλ-=)(分别为其概率分布函数,那么x z =+y 的分布为 z z x z x y x z e z dx e e y f x f z f λλλλλ---===?20)(*)()( z z x z x e z dx e e λλλλλ----==?20)(2, 0>z Gamma 分布:N 个指数分布的随机变量之和的分布为Gamma 分布。 例如x 与y 为相互独立的指数分布,x x e x f λλ-=)(和y y e y f λλ-=)(分别为其概率分布函数,那么x z =+y 的分布为 z z x z x y x z e z dx e e y f x f z f λλλλλ---===?20)(*)()( 如此卷积下去,N 个相互独立的指数分布相加的概率分布为Gamma 分布,其概率密度函数 ?? ???≥Γ=--other x e x x f x 00)()(/1β α αβα 这里参数0,>βα。Gamma 函数 ?∞ --=Γ01)(dx e x x αα。 性质1:利用分部积分法得到递推公式 )()1(αααΓ=+Γ, 当α为整数n 时,利用分部积分法得到 !)()1(n n n n =Γ=+Γ, 而非整数2/1=α,利用变量代换2/2y x =,得到 π=Γ)2/1(, 所以有

概率论与随机过程考点总结

第一章随机过程的基本概念与基本类型

一.随机变量及其分布 1.随机变量X , 分布函数)()(x X P x F ≤= 离散型随机变量X 的概率分布用分布列 )(k k x X P p == 分布函数∑= k p x F )( 连续型随机变量X 的概率分布用概率密度)(x f 分布函数?∞-= x dt t f x F )()( 2.n 维随机变量),,,(21n X X X X = 其联合分布函数),,,,(),,,()(221121n n n x X x X x X P x x x F x F ≤≤≤== 离散型 联合分布列 连续型 联合概率密度 3.随机变量的数字特征 数学期望:离散型随机变量X ∑= k k p x EX 连续型随机变量X ?∞∞-=dx x xf EX )( 方差:222)()(EX EX EX X E DX -=-= 反映随机变量取值的离散程度 协方差(两个随机变量Y X ,):EY EX XY E EY Y EX X E B XY ?-=--=)()])([( 相关系数(两个随机变量Y X ,):DY DX B XY XY ?=ρ 若0=ρ,则称Y X ,不相关。 独立?不相关?0=ρ 4.特征函数)()(itX e E t g = 离散 ∑=k itx p e t g k )( 连续 ?∞ ∞-=dx x f e t g itx )()( 重要性质:1)0(=g ,1)(≤t g ,)()(t g t g =-,k k k EX i g =)0( 母函数:∑∞===0)()(k k k k z p z E z g !)0()(k g p k k = )1()('g X E = 2''")]1([)1()1()(g g g X D -+= 5.常见随机变量的分布列或概率密度、期望、方差 0-1分布 q X P p X P ====)0(,)1( p EX = pq DX = 二项分布 k n k k n q p C k X P -==)( np EX = n p q DX = 泊松分布 !)(k e k X P k λλ-== λ=EX λ=DX 均匀分布略 正态分布),(2σa N 22 2)(21 )(σσπa x e x f --= a EX = 2 σ=DX 指数分布 ???<≥=-0, 00,)(x x e x f x λλ λ1=EX 21λ=DX 6.N维正态随机变量),,,(21n X X X X =的联合概率密度),(~B a N X

浙江大学《概率论、数理统计与随机过程》课后习题答案张帼奋主编第一章概率论习题__偶数题

第一章 概率论的基本概念 注意: 这是第一稿(存在一些错误) 第一章概率论习题__偶数.doc 2、解 (1)AB BC AC 或ABC ABC ABC ABC ; (2)AB BC AC (提示:题目等价于A ,B ,C 至少有2个发生,与(1)相似); (3)ABC ABC ABC ; (4)A B C 或ABC ; (提示:A ,B ,C 至少有一个发生,或者A B C ,,不同时发生) ; 4、解 (1)因为A B ,不相容,所以A B ,至少有一发生的概率为: ()()()=0.3+0.6=0.9P A B P A P B =+ (2) A B , 都不发生的概率为: ()1()10.90.1P A B P A B =-=-=; (3)A 不发生同时B 发生可表示为:A B ,又因为A B ,不相容,于是 ()()0.6P A B P B ==; 6、解 设A ={“两次均为红球”},B ={“恰有1个红球”},C ={“第二次是红球”} 若是放回抽样,每次抽到红球的概率是: 810,抽不到红球的概率是:210,则 (1)88()0.641010 P A =?=; (2)88()210.321010 P B =??-=(); (3)由于每次抽样的样本空间一样,所以: 8()0.810 P C == 若是不放回抽样,则 (1)2821028()45 C P A C ==;

(2)82210()45 P B C ==; (3)111187282104()5 A A A A P C A +==。 8、解 (1)设A ={“1红1黑1白”},则 1112323712()35 C C C P A C ==; (2)设B ={“全是黑球”},则 33371()35 C P B C ==; (3)设C ={第1次为红球,第2次为黑球,第3次为白球”},则 2322()7!35 P C ??==。 10、解 由已知条件可得出: ()1()10.60.4P B P B =-=-=; ()()()0.70.50.2P AB P A P AB =-=-=; ()()()()0.9P A B P A P B P AB =+-=; (1)(())()7(|==()()9P A A B P A P A A B P A B P A B =); (2)()()()0.40.20.2P AB P B P AB =-=-= ()(+()()0.5P A B P A P B P AB =-=) 于是 (())()2(|==5()()P A A B P AB P A A B P A B P A B =); (3)(())()2(|)()()9P AB A B P AB P AB A B P A B P A B ===。 12、解 设A ={该职工为女职工},B ={该职工在管理岗位},由题意知, ()0.45P A =,()0.1P B =,()0.05P AB = 所要求的概率为

《概率论与随机过程》第1章习题

《概率论与随机过程》第一章习题 1.写出下列随机试验的样本空间。 (1)记录一个小班一次数学考试的平均分数(设以百分制记分)。 (2)同时掷三颗骰子,记录三颗骰子点数之和。 (3)10只产品中有3只是次品,每次从其中取一只(取出后不放回),直到将3只次品都取出,记录抽取的次数。 (4)生产产品直到得到10件正品,记录生产产品的总件数。 (5)一个小组有A,B,C,D,E5个人,要选正副小组长各一人(一个人不能兼二个职务),观察选举的结果。 (6)甲乙二人下棋一局,观察棋赛的结果。 (7)一口袋中有许多红色、白色、蓝色乒乓球,在其中任意取4只,观察它们具有哪几种颜色。 (8)对某工厂出厂的产品进行检查,合格的盖上“正品”,不合格的盖上“次品”,如连续查出二个次品就停止检查,或检查4个产品就停止检查,记录检查的结果。 (9)有A,B,C三只盒子,a,b,c三只球,将三只球装入三只盒子中,使每只盒子装一只球,观察装球的情况。 (10)测量一汽车通过给定点的速度。 (11)将一尺之棰折成三段,观察各段的长度。 2.设A,B,C为三事件,用A,B,C的运算关系表示下列事件。 (1)A发生,B与C不发生。 (2)A与B都发生,而C不发生。 (3)A,B,C都发生。 (4)A,B,C中至少有一个发生。 (5)A,B,C都不发生。 (6)A,B,C中至多于一个发生。 (7)A,B,C中至多于二个发生。 (8)A,B,C中至少有二个发生。

3. 设{ }10,2,1, =S ,{}4,3,2=A ,{}5,4,3=B ,{}7,6,5=C ,具体写出下列各等式 (1)B A 。 (2)B A ?。 (3)B A 。 (4) BC A 。 (5))(C B A ?。 4. 设{} 20≤≤=x x S ,?????? ≤<=121x x A ,? ?? ???<≤=2341 x x B ,具体写出下列各式。 (1)B A ?。 (2)B A ?。 (3)B A 。 (4) B A 。 5. 设A ,B ,C 是三事件,且41)()()(===C P B P A P ,0)()(==CB P AB P ,1)(=AC P ,求A ,B , C 至少有一个发生的概率。 6. 在1500个产品中有400个次品,1100个正品,任意取200个。 (1) 求恰有90个次品的概率。 (2) 至少有2个次品的概率。 7.(1)在房间里有500个人,问至少有一个人的生日是10月1日的概率是多少(设一年以365天计算) (2)在房间里有4个人,问至少有二个人的生日在同一个月的概率是多少 8. 一盒子中有4只次品晶体管,6只正品晶体管,随机地抽取一只测试,直到4只次品管子都找到为止。求 第4只次品管子在下列情况发现的概率。 (1) 在第5次测试发现。 (2) 在第10次测试发现。 9. 甲、乙位于二个城市,考察这二个城市六月份下雨的情况。以A ,B 分别表示甲,乙二城市出现雨天这一 事件。根据以往的气象记录已知4.0)()(==B P A P ,28.0)(=AB P ,求)/(B A P ,)/(A B P 及 )(B A P ?。 10. 已知在10只晶体管中有2只次品,在其中取二次,每次随机地取一只,作不放回抽样,求下列事件的概 率。 (1) 二只都是正品。 (2) 二只都是次品。 (3) 一只是正品,一只是次品。 (4) 第二次取出的是次品。 11. 某人忘记了电话号码的最后一个数字,因而随意地拨号,求他拨号不超过三次而接通所需的电话的概率

相关文档
最新文档