概率论中几种收敛及其联系1
- 格式:doc
- 大小:497.50 KB
- 文档页数:8
概率论中的收敛-正文概率论中的极限定理和数理统计学中各种统计量的极限性质,都是按随机变量序列的各种不同的收敛性来研究的。
设{X n,n≥1}是概率空间(Ω,F,P)(见概率)上的随机变量序列,从随机变量作为可测函数看,常用的收敛概念有以下几种:以概率1收敛若,则称{X n,n≥1}以概率1收敛于X。
强大数律(见大数律)就是阐明事件发生的频率和样本观测值的算术平均分别以概率 1收敛于该事件的概率和总体的均值。
以概率 1收敛也常称为几乎必然(简记为α.s)收敛,它相当于测度论中的几乎处处(简记为α.e.)收敛。
依概率收敛若对任一正数ε,都有,则称{X n,n≥1}依概率收敛于X。
它表明随机变量X n与X发生较大偏差(≥ε)的概率随n无限增大而趋于零。
概率论中的伯努利大数律就是最早阐明随机试验中某事件 A发生的频率依概率收敛于其概率P(A)的。
依概率收敛相当于测度论中的依测度收敛。
r阶平均收敛对r≥1,若X n-X的r阶绝对矩(见矩)的极限,则称{X n,n≥1}r阶平均收敛于X。
特别,当r=1时,称为平均收敛;当r=2时,称为均方收敛,它在宽平稳过程(见平稳过程)理论中是一个常用的概念。
弱收敛设X n的均值都是有限的,若对任一有界随机变量Y都有,则称{X n,n≥1}弱收敛于X。
由平均收敛可以推出弱收敛。
从随机变量的分布函数(见概率分布)看,常用的有如下收敛概念。
分布弱收敛设F n、F分别表示随机变量X n、X的分布函数,若对F的每一个连续点x都有,则称X n的分布F n弱收敛于X的分布F,也称X n依分布收敛于X。
分布弱收敛还有各种等价条件,例如,对任一有界连续函数ƒ(x),img src="image/254-6.gif" align="absmiddle">。
分布弱收敛是概率论和数理统计中经常用到的一种收敛性。
中心极限定理就是讨论随机变量序列的标准化部分和依分布收敛于正态随机变量的定理。
泛函分析关于各种收敛的定义及其关系讨论1.弱收敛:设χ是一个巴拿赫空间,{}n x ⊂χ,x χ∈,称{}n x 弱收敛到x ,记做nx x ,是指:对于∀f ∈χ*都有()()lim .n n f x f x →∞=这时x 称做点列n x 的弱极限。
2.强收敛:0n x x -→()n →∞,也称为按范数收敛,x 是n x 的强极限。
强收敛与弱收敛的关系:若dim χ<∞,则弱收敛与强收敛是等价的。
命题:弱收敛若存在必唯一,强极限若存在必是弱极限。
当dim =χ∞时,弱极限存在却未必有强极限。
定理:设是一个巴拿赫空间,nx x ,则0,()01,2,,i i n λ∃≥=,11ni i λ==∑,使得01.ni ii x xλε=-≤∑既然也是一个赋范线性空间,在上自然也有两种收敛性:强收敛和弱收敛。
所谓弱收敛nf f ,是指对x χ****∀∈都有()().n n x f x f **→3.*弱收敛:设χ是巴拿赫空间,{}n f χ*⊂,f χ*∈。
称n f *弱收敛到f,记做lim n n f f ω*→∞-=,是指:对于x χ∀∈,都有()()lim n n f x f x →∞=。
这时f 称做泛函序列{}n f 的*弱极限。
*弱收敛与弱收敛的关系:由于χχ**⊂,因此χ*上的弱收敛蕴含着χ*上的*弱收敛,而且当χ是一个自反空间时,*弱收敛与弱收敛等价。
定理:设χ是巴拿赫空间,又设{}n x ⊂χ,x χ∈,则为了nx x ,必须且仅须⑴n x 有界;⑵对χ*中的一个稠密子集M *上的一切f 都有()()lim n n f x f x →∞=。
定理:设χ是一个B 空间,又设{}n f χ*⊂,{}f χ*⊂,则为了n f *弱收敛到f ,必须且仅须⑴n f 有界;⑵对χ中的一个稠密子集M 上的一切x 都有()()lim n n f x f x →∞=。
4.依测度收敛: 设{}n f 是q E R ⊂上的一列..a e 有限的可测函数列,若在E 上..a e 有限的可测函数()f x 满足下列关系:对于任意的0σ>有lim 0n x mE f f σ→∞⎡-≥⎤=⎣⎦,则称函数列{}n f 依测度收敛于f ,记为()()n f x f x ⇒。
概率论中几乎处处收敛和依测度收敛的关系概率论中几乎处处收敛和依测度收敛是两个不同的概念,但它们之间存在一定的关系。
几乎处处收敛是指在某个概率空间中,随机变量序列在几乎所有样本点处收敛于一个确定的随机变量,而依测度收敛则是指随着样本容量的增大,随机变量序列趋向于某个随机变量的分布,这种趋向是在概率测度的意义下进行的。
在一些情况下,几乎处处收敛和依测度收敛可能同时出现,比如对于一些收敛速度比较快的随机变量序列,在满足一定的条件下,几乎处处收敛和依测度收敛都会发生。
但是,对于一些收敛速度比较慢的随机变量序列,可能只存在几乎处处收敛或者只存在依测度收敛。
总的来说,在概率论中,几乎处处收敛和依测度收敛都是非常重要的概念,它们的性质和应用都是十分广泛的。
对于随机变量序列的研究和应用,需要综合考虑这两种收敛方式的特点和优缺点,才能做出正确的判断和应用。
- 1 -。
依概率收敛大数定律中心极限定理依概率收敛、大数定律和中心极限定理是概率论中重要的三个定理,它们在统计学、经济学、物理学等领域有着广泛的应用。
本文将分别介绍这三个定理的定义、原理和应用。
一、依概率收敛1.1 定义依概率收敛是指,对于一组随机变量序列X1,X2,...,Xn,...,如果对于任意给定的正数ε>0,都有:lim P(|Xn-X|≥ε)=0(n→∞)其中,X为常数,则称随机变量序列{Xn}依概率收敛于X。
1.2 原理依概率收敛是弱收敛的一种形式。
它表示当样本容量趋近于无限大时,样本均值与总体均值之间的差距会越来越小,并最终趋于零。
1.3 应用依概率收敛在经济学和金融学中有着广泛的应用。
例如,在股票市场上,当投资者持有股票时,他们通常希望股票价格能够稳定增长。
而依概率收敛则可以帮助投资者预测股票价格的未来趋势,从而制定出更为科学合理的投资策略。
二、大数定律2.1 定义大数定律是指,对于一组独立同分布的随机变量序列X1,X2,...,Xn,...,如果E(Xi)=μ,则对于任意给定的正数ε>0,都有:lim P(|(X1+X2+...+Xn)/n-μ|≥ε)=0(n→∞)其中,μ为总体均值,则称随机变量序列{Xn}满足大数定律。
2.2 原理大数定律是概率论中最基本也是最重要的一条定理。
它表明当样本容量越来越大时,样本均值会越来越接近总体均值。
换句话说,当样本容量充分大时,样本均值就可以代表总体均值。
2.3 应用大数定律在统计学中有着广泛的应用。
例如,在进行人口普查或调查时,如果样本容量太小,则无法准确地反映总体情况。
而通过应用大数定律可以帮助我们确定一个合适的样本容量范围,并保证调查结果的准确性和可靠性。
三、中心极限定理3.1 定义中心极限定理是指,对于一组独立同分布的随机变量序列X1,X2,...,Xn,...,如果E(Xi)=μ,Var(Xi)=σ²,则随机变量序列:Zn=(X1+X2+...+Xn-μn)/σ√n近似服从标准正态分布,则称随机变量序列{Xn}满足中心极限定理。
论文摘要概率是对大量随机现象的考察中显现出来的,而对于大量的随机现象的描述就要采用极限的方法。
概率统计中的极限定理研究的是随机变量序列的某种收敛性,对随机变量收敛性不同定义将导致不同的极限定理,而随机变量的收敛性的确可以有各种不同的定义。
主要讨论了依概率收敛与依分布收敛,r阶收敛与几乎处处收敛,几乎处处收敛与依概率收敛之间的关系。
给出了由依概率收敛推出几乎处处收敛的条件和由依概率收敛推出r阶收敛的条件,从而比较完全地说明了随机变量序列的各种收敛性之间的关系。
本论文将对随机变量的几种收敛作出较为简单扼要的介绍和讨论.论文结构如下:一、随机变量的几种收敛的概念理论;二、随机变量的几种收敛之间的关系;从以上几个方面对随机变量的几种收敛理论简明扼要地分析,说明随机变量序列收敛理论在实际问题中的应用范围之广,在实际生活中的重要性。
关键词:r阶收敛;几乎处处收敛;依概率收敛;依分布收敛。
AbstractThe Probability is the study of a large number of random phenomena emerge, but for a large number of random phenomena should use extreme methods described. Probability and statistics in the limit theorem is asequence of random variables convergence, convergence of random variables with different definitions lead to different limit theorem, and indeed the convergence of random variables can have different definitions. Mainly discussed convergence in probability and convergence in distribution, convergence in order r and almost everywhere convergence, almost sure convergence and convergence in probability relationship. Convergence in probability is given by the launch of almost everywhere convergence of conditions and the convergence in probability by the introduction of r-order convergence conditions, which more completely describes the various random variables convergence relationship. This paper will make the convergence of several random variables is more brief presentations and discussions. Paper is structured as follows: 1. Convergence of random variables the concept of theory; 2. the convergence of several random variables between; From the above aspects of the theory of random variables of several brief analysis of convergence shows that the convergence theory of random variables in the actual problems in the wide range of applications, in real life importance.Keywords: convergence in order r ; almost everywhere or almost surely; convergence in probability; convergence in distribution.目录引言: 41 几种收敛性定义 42 依概率收敛与依分布收敛的关系 53 r阶收敛与几乎处处收敛的关系 114 依概率收敛与r阶收敛的关系 135 几乎处处收敛与依概率收敛和依分布收敛的关系 17总结 19四种收敛性 19四种收敛蕴涵关系 19致谢 21参考文献 22引言:概率论最早产生于17世纪,本来是保险事业的发展而产生的,但是来自于赌博者的请求,却是数学家们思考概率论中问题的源泉。
概率论控制收敛定理概率论控制收敛定理是概率论中的一个重要定理,它描述了随机变量序列的收敛性质。
在实际问题中,我们经常需要研究随机变量的极限行为,而概率论控制收敛定理为我们提供了一种判断随机变量序列是否收敛的方法。
概率论控制收敛定理的核心思想是通过控制随机变量序列的矩或特征函数来判断其收敛性。
其中,矩是随机变量的一个重要特征,它能够刻画随机变量的分布情况。
特征函数则是随机变量的另一种特征描述方式,它是随机变量的分布函数的傅里叶变换。
概率论控制收敛定理主要包括三种形式:切比雪夫型、布瓦杰-拉普拉斯型和林德伯格型。
切比雪夫型定理是最基本的收敛定理,它利用切比雪夫不等式给出了一个上界,通过控制该上界可以判断随机变量序列的收敛性。
布瓦杰-拉普拉斯型定理是一种强收敛定理,它给出了一个直接的收敛判别条件,不需要额外的条件限制。
而林德伯格型定理则是在一些特殊情况下的收敛定理,它给出了一种弱收敛的判别方法。
概率论控制收敛定理在实际问题中有着广泛的应用。
例如,在大数定律中,我们需要判断随机变量序列的均值是否收敛于某个常数,这时可以利用概率论控制收敛定理来判断。
在中心极限定理中,我们需要判断随机变量序列的标准化和是否收敛于标准正态分布,也可以借助概率论控制收敛定理来进行判别。
此外,在统计推断中,我们还可以利用概率论控制收敛定理来研究参数估计的收敛性。
概率论控制收敛定理是概率论中的一个重要工具,它为我们研究随机变量序列的收敛性提供了一种有效的方法。
通过控制随机变量序列的矩或特征函数,我们可以判断其是否收敛,并在实际问题中得到广泛应用。
概率论控制收敛定理的研究不仅对于理论研究有着重要的意义,也对于实际应用有着重要的指导作用。
概率论中几种收敛及其联系 西北师范大学数学与应用数学专业 甘肃兰州 730070摘要:概率极限理论是概率论的重要组成部分,内容十分丰富,本文仅介绍依概率收敛,平均收敛,依分布收敛,a.s.收敛,完全性收敛以及事件序列的无穷次发生之间的联系.关键词:示性函数 概率 随机变量 收敛 分布函数Abstract : The probability limit theory is an important part of the probability theory, is rich in content, this article describes only the convergence in probability, the averageconvergence, converge in distribution, as convergence, complete convergence, as well as the infinite sequence of events occurred betweenKey words : indicator function probability random variable convergence distribution function首先,为了研究这几种收敛性,我们需要估计概率。
所以首先需要建立必要的概率不等式。
我们以I(A)表示事件A 的示性函数,即有⎩⎨⎧∉∈=.,0;,1)(A A A I ωω那么,显然当B A ⊂时,有).()(B I A I ≤,并且有).()(A EI A P =定理 1 (Chebyshev 不等式)设)(x g 是定义在 [)∞,0 上的非降的非负值函数,如果对随机变量η,有∞<)(ηEg ,那么对任何使得0)(>a g 的0>a ,我们都有.)()()(a g Eg a P ηη≤≥证明:首先,由)(x g 的非降性知 ()()()().a g g a ≥⊂≥ηη 因此()()()()()()()()().a g g I a g g a g g I a I ≥≤≥≤≥ηηηη其中)(A I 是事件A 的示性函数;其中的第二个不等号是由于在事件()()()a g g ≥η上面有()()1≥a g g η由上述不等式立得()()()()()()()()()()()().a g Eg a g g I a g g E a g g EI a EI a P ηηηηηη≤⎭⎬⎫⎩⎨⎧≥≤≥≤≥=≥Chebyshev 不等式在以后的证明中有非常重要的作用,所以我们在这里先将其提出. 下面让我们先从较简单的依概率收敛谈起.定义 1 已知随机变量序列{n ξ,N n ∈}与随机变量ξ.如果对0>∀ε,都有.0)|(|lim =≥-∞→εξξn n P那么我们就称随机变量序列{N n n ∈,ξ}依概率收敛到随机变量ξ,记为ξξ−→−Pn其实,依概率收敛的本质是n ξ对ξ的绝对偏差不小于任一给定量的可能性将随着n 增大而减小.或者说,绝对偏差小于任一给定量的可能性将随着增大而接近1,即上式等价于1)(lim =<-∞→εξξn n P .特别当ξ为退化分布时,即()1==c P ξ,则称序列{}n ξ依概率收敛于c ,即c Pn −→−ξ.下面, 我们来引入随机变量序列的另外一种收敛:平均收敛.定义 2 如果{}0;,>n n ξξ是r L 中的随机变量, 其中,0>r {}∞<=rr E L ξξ,并且0→-ξξn E , ()∞→n .则称随机变量序列{}N n n ∈,ξ依r 阶平均收敛到随机变量,ξ记作ξξ−→−rLn 当1=r 时简称为依平均收敛,并记为.ξξ−→−Ln在依概率收敛和平均收敛之间存在如下关系:定理 2 r 阶平均收敛蕴含依概率收敛. 证明:因为0lim =-∞→rn n E ξξ,故对,,0N ∃>∀ε当N n >时,有εξξrrn a E <- .又由Chebyshev 不等式知对任何0>a ,有()rrn n aE a P ξξξξ-≤≥-,故()εξξ<≥-a P n ,因此()0lim =≥-∞→a P n n ξξ.但是,反之不真.反例如下:例1 设概率空间为区间上的几何型概率空间,即有 ()1,0=Ω , () 1.0B F = , L P =. 令()0=ωξ, ()1,0∈∀ω, 而易知,对任何0>ε,当∞→n 时,都有 ()()020→=>≤>-nP P n n ξεξξ,所以ξξ−→−Pn ;但是1≡=-n n E E ξξξ, 所以n ξ不依平均收敛到ξ.在概率极限理论中,研究随机变量序列收敛性的同时当然也要研究相应的分布函数序列的收敛性,下面就让我们来谈一谈依分布收敛.定义3 设{}N n x F n ∈),(是一列定义在R 上的有界非降的左连续函数,如果存在一个定义在上的有界非降的左连续函数).(x F 使得),(),()(lim F C x x F x F n n ∈∀=∞→则称{})(x F n 弱收敛到)(x F 记为),()(x F x F n −→−ω并称)(x F 是{})(x F n 的弱极限。
第四节 条件收敛与绝对收敛对于任意项级数∑∞=1n n a ,我们已经给出了其收敛的一些判别方法,本节我们讨论任意项级数的其他性质 — 条件收敛与绝对收敛。
定义10.5 对于级数∑∞=1n n a ,如果级数∑∞=1||n n a 是收敛的,我们称级数∑∞=1n n a 绝对收敛。
如果∑∞=1||n n a 发散,但∑∞=1n n a 是收敛的, 我们称级数∑∞=1n n a 条件收敛。
条件收敛的级数是存在的,如∑∞=+-11.)1(n n n收敛级数可以看成是有限和的推广,但无限和包含有极限过程。
并不是有限和的所有性质都为无限和所保持。
大体说来,绝对收敛的级数保持了有限和的大多数性质,条件收敛的级数则在某些方面与有限和差异很大。
下面我们讨论条件收敛与绝对收敛的性质。
定理10.17 绝对收敛级数必为收敛级数,反之则不然. 证明:设级数∑∞=1n n a 收敛,即∑∞=1||n n a 收敛,由Cauchy 收敛准则,对0>∀ε, 存在N ,当n >N 时,对一切自然数p , 成立着 ε<++++++||||||21p n n n a a a 于是:≤++++++||21p n n n a a a ε<++++++||||||21p n n n a a a再由Cauchy 收敛准则知∑∞=1n n a 收敛。
由级数∑∞=+-11)1(n n n 可看出反之不成立。
注:如果正项级数∑∞=1||n n a 发散,不能推出级数∑∞=1n n a 发散。
但如果使用Cauchy 判别法或D ’Alembert 判别法判定出∑∞=1||n n a 发散,则级数∑∞=1n n a 必发散,这是因为利用Cauchy 判别法或D ’Alembert 判别法来判定一个正项级数∑∞=1||n n a 为发散时,是根据这个级数的一般项|a n |当+∞→n 时不趋于0,因此对级数∑∞=1n n a 而言,它的一般项也不趋于零,所以级数∑∞=1n n a 发散。
第三章3・1四种收敛性车贝晓夫不等式2几乎处处收敛3依概率收敛4依分布收敛5r■阶收敛【引理】(马尔可夫不等式)设随机变量X有I•阶绝对矩,EX 「<00,则对任意£ > 0有P(\X\>s)<^4-【证明】设X的分布函数为F(x),则有:P(\X\>£)= f dF(x) < f x-\rdF(x)1 r00 ir< —-f x dF(x) 』J・8引理的特殊情况: P(|X|> £)<纟甲取一2,并以X ・E(X)代替X 得车贝晓夫不等式 * 【定理】(车贝晓夫不等式)设随机变量X 有2阶中心矩,E[X-E(X)] 则对任意£ > 0有P (|X -E (X )|>^)<^2【证明】设X 的分布函数为尸(兀),则有:DX = f (X -E(X))2JF(X )>f (x-E(X))2dF(x)\x-E(X)\^> J£2dF(x)= e 2P{\X-E(X)\>e}从而尸(|X - E(X)\ >e)< 代耳 <=^> P(\X 一 E(X)\ <^)>1-2^8 82 <00,P(\X-E(X)\<s)>l-^^ 8由车贝晓夫不等式可以看出,若b?越小,贝!I 事件[\X-E(X)\<£]的概率越大,即随机变量X集中在期望附近的可能性越大.特别地,若D(X)=O,则对任意£>0,恒<P{|X-EX|>g}|0- 因此P{X HE¥} = 0,即P{X = EX} = 1,所以方差为0的随机鑼是常数菱P{\X-E(X)\>当方差已知时,车贝晓夫不等式给出了/X与它的期望的偏差不小于8的概率的估计式・如取£ = 3b2P{IX-E(X)I> 3<r} <— ".1119(7 屋可见,对任给的分布,只要期望和方差亍存蠹则r.v X取值偏离超过3a的概率小于0.1117二车贝晓夫不等式的用途:车贝晓夫不等式只利用随机变量的数学期望及方差就可对的概率分布进行估计。
本科毕业论文题目:随机变量序列的几种收敛性及其关系学院:数学与计算机学院班级:数学与应用数学2008级八班姓名:***指导教师:丁平仁职称:副教授完成日期:2012 年5月10 日随机变量序列的几种收敛性及其关系摘要:本文主要对随机变量序列的四种收敛性:a.e.收敛、依概率收敛、依分布收敛、r—阶收敛的概念、性质进行阐述;并结合具体实例讨论了它们之间的关系,进一步对概率论中依分布收敛的等价条件和一些依概率收敛的弱大数定律进行了具体的研究.关键字:随机变量序列收敛分布函数目录1.引言 .................................................................... 1 2.a.e.收敛、依概率收敛、依分布收敛、r —阶收敛的概念、性质以及它们之间的关系. 2.1 a.e.收敛的概念及性质 ................................................................................................... 1 2.2 依概率收敛的概念及性质 .............................................................................................. 2 2.3依分布收敛的概念及性质 ............................................................................................... 3 2.4 r —阶收敛的概念及性质 .................................................................................................. 5 3.随机变量序列依分布收敛的等价条件. (6)4.随机变量∑=nk k n 11ξ依概率收敛的一些结果 (9)5.小结. .................................................................. 12 6.参考文献 (12)1.引言:在数学分析和实变函数中“收敛性”极为重要,特别在实变函数中对可测函数列收敛性的讨论。
均方收敛依概率收敛依分布收敛《均方收敛依概率收敛依分布收敛:概念与应用》一、引言均方收敛、概率收敛和分布收敛是概率论和数理统计中的重要概念,它们在各种领域都有着广泛的应用。
本文将分别介绍这三种收敛方式,并探讨它们的异同点及其在实际问题中的应用。
二、均方收敛的定义及性质1. 均方收敛的定义均方收敛是指在均方意义下的收敛,即对于随机变量序列{X_n}和X,当n趋于无穷大时,有E[(X_n - X)^2]趋于0,则称{X_n}在均方意义下收敛于X。
2. 均方收敛的性质(1)均方收敛蕴含概率收敛。
(2)均方有界序列有子列在概率意义下收敛。
三、概率收敛的定义及定理1. 概率收敛的定义概率收敛是指对于随机变量序列{X_n}和X,当n趋于无穷大时,有P(|X_n - X| > ε)收敛于0(其中ε为任意小的正数),则称{X_n}在概率意义下收敛于X。
2. 概率收敛的定理切比雪夫不等式、依概率收敛的夹逼定理等。
四、分布收敛的定义及特性1. 分布收敛的定义分布收敛是指对于随机变量序列{X_n}和X,当n趋于无穷大时,有F_n(x)收敛于F(x),则称{X_n}在分布意义下收敛于X。
2. 分布收敛的特性(1)随机变量序列的分布收敛与其对应的分布函数的收敛。
(2)分布收敛蕴含概率收敛,但一般不蕴含均方收敛。
五、均方收敛、概率收敛和分布收敛的关系1. 关系概述均方收敛比概率收敛更强,概率收敛比分布收敛更弱。
2. 举例说明以随机变量序列的不同收敛方式为例,比如正态分布的中心极限定理,可以辅助理解三种收敛方式之间的关系。
六、应用举例通过一些实际问题的案例,如大数定律、中心极限定理等,展示均方收敛、概率收敛和分布收敛在实际问题中的应用。
七、结语总结三种收敛方式的特点和应用场景,强调在实际问题中选择合适的收敛方式的重要性。
以上是本文对于均方收敛、概率收敛以及分布收敛的深入探讨,通过对三种收敛方式的逐一介绍以及它们的相互关系和应用举例,希望读者能对这一概念有一个更深入的理解,并能在实际问题中灵活运用。
论文摘要概率是对大量随机现象的考察中显现出来的,而对于大量的随机现象的描述就要采用极限的方法。
概率统计中的极限定理研究的是随机变量序列的某种收敛性,对随机变量收敛性不同定义将导致不同的极限定理,而随机变量的收敛性的确可以有各种不同的定义。
主要讨论了依概率收敛与依分布收敛,r阶收敛与几乎处处收敛,几乎处处收敛与依概率收敛之间的关系。
给出了由依概率收敛推出几乎处处收敛的条件和由依概率收敛推出r阶收敛的条件,从而比较完全地说明了随机变量序列的各种收敛性之间的关系。
本论文将对随机变量的几种收敛作出较为简单扼要的介绍和讨论.论文结构如下:一、随机变量的几种收敛的概念理论;二、随机变量的几种收敛之间的关系;从以上几个方面对随机变量的几种收敛理论简明扼要地分析,说明随机变量序列收敛理论在实际问题中的应用范围之广,在实际生活中的重要性。
关键词:r阶收敛;几乎处处收敛;依概率收敛;依分布收敛。
AbstractThe Probability is the study of a large number of random phenomena emerge, but for a large number of random phenomena should use extreme methods described. Probability and statistics in the limit theorem is a sequence of random variables convergence, convergence of random variables with different definitions lead to different limit theorem, and indeed the convergence of random variables can have different definitions. Mainly discussed convergence in probability and convergence in distribution, convergence in order r and almost everywhere convergence, almost sure convergence and convergence in probability relationship. Convergence in probability is given by the launch of almost everywhere convergence of conditions and the convergence in probability by the introduction of r-order convergence conditions, which more completely describes the various random variables convergence relationship.This paper will make the convergence of several random variables is more brief presentations and discussions. Paper is structured as follows:1. Convergence of random variables the concept of theory;2. the convergence of several random variables between;From the above aspects of the theory of random variables of several brief analysis of convergence shows that the convergence theory of random variables in the actual problems in the wide range of applications, in real life importance.Keywords: convergence in order r ; almost everywhere or almost surely; convergence in probability; convergence in distribution.目录引言: (4)1 几种收敛性定义 (4)2 依概率收敛与依分布收敛的关系 (5)3 r阶收敛与几乎处处收敛的关系 (11)4 依概率收敛与r阶收敛的关系 (13)5 几乎处处收敛与依概率收敛和依分布收敛的关系 (17)总结 (19)四种收敛性 (19)四种收敛蕴涵关系 (19)致谢 (21)参考文献 (22)引言:概率论最早产生于17世纪,本来是保险事业的发展而产生的,但是来自于赌博者的请求,却是数学家们思考概率论中问题的源泉。
可测函数列的几种收敛的关系
1. 一致收敛:如果函数列 {fn(x)} 对于任意给定的ε > 0,都存
在一个 N,使得当 n > N 时,对于任意的 x ∈ E,都有|fn(x) − f(x)| < ε,则称函数列 {fn(x)} 在 E 上一致收敛于 f(x),记作
fn(x) → f(x) (x ∈ E)。
一致收敛意味着收敛速度足够快,也意
味着极限函数与原函数的交换次序是可以进行的。
2. 逐点收敛:如果对于任意的 x ∈ E,函数列 {fn(x)} 都收敛
于 f(x),即lim_n→∞ fn(x) = f(x),则称函数列 {fn(x)} 逐点收
敛于 f(x),也叫点态收敛。
3. 均方收敛:如果对于任意的ε > 0,有lim_n→∞ ∫[a,b] |fn(x)
− f(x)|² dx = 0,则称函数列 {fn(x)} 在 [a,b] 上均方收敛于 f(x),记作 fn(x) ⇀ f(x) (a ≤ x ≤ b)。
均方收敛意味着收敛速度足够快,但是极限函数与原函数的交换次序一般是不可进行的。
4. 平均收敛:如果对于任意的ε > 0,有lim_n→∞ ∫[a,b] |fn(x)
− f(x)| dx = 0,则称函数列 {fn(x)} 在 [a,b] 上平均收敛于 f(x),记作 fn(x) ⟶f(x) (a ≤ x ≤ b)。
平均收敛比逐点收敛更强,但是
收敛速度可能不够快。
概率论中几种收敛及其联系 西北师范大学数学与应用数学专业 甘肃兰州 730070摘要:概率极限理论是概率论的重要组成部分,内容十分丰富,本文仅介绍依概率收敛,平均收敛,依分布收敛,a.s.收敛,完全性收敛以及事件序列的无穷次发生之间的联系.关键词:示性函数 概率 随机变量 收敛 分布函数Abstract : The probability limit theory is an important part of the probability theory, is rich in content, this article describes only the convergence in probability, the averageconvergence, converge in distribution, as convergence, complete convergence, as well as the infinite sequence of events occurred betweenKey words : indicator function probability random variable convergence distribution function首先,为了研究这几种收敛性,我们需要估计概率。
所以首先需要建立必要的概率不等式。
我们以I(A)表示事件A 的示性函数,即有⎩⎨⎧∉∈=.,0;,1)(A A A I ωω那么,显然当B A ⊂时,有).()(B I A I ≤,并且有).()(A EI A P =定理 1 (Chebyshev 不等式)设)(x g 是定义在 [)∞,0 上的非降的非负值函数,如果对随机变量η,有∞<)(ηEg ,那么对任何使得0)(>a g 的0>a ,我们都有.)()()(a g Eg a P ηη≤≥证明:首先,由)(x g 的非降性知 ()()()().a g g a ≥⊂≥ηη 因此()()()()()()()()().a g g I a g g a g g I a I ≥≤≥≤≥ηηηη其中)(A I 是事件A 的示性函数;其中的第二个不等号是由于在事件()()()a g g ≥η上面有()()1≥a g g η由上述不等式立得()()()()()()()()()()()().a g Eg a g g I a g g E a g g EI a EI a P ηηηηηη≤⎭⎬⎫⎩⎨⎧≥≤≥≤≥=≥Chebyshev 不等式在以后的证明中有非常重要的作用,所以我们在这里先将其提出. 下面让我们先从较简单的依概率收敛谈起.定义 1 已知随机变量序列{n ξ,N n ∈}与随机变量ξ.如果对0>∀ε,都有.0)|(|lim =≥-∞→εξξn n P那么我们就称随机变量序列{N n n ∈,ξ}依概率收敛到随机变量ξ,记为ξξ−→−Pn其实,依概率收敛的本质是n ξ对ξ的绝对偏差不小于任一给定量的可能性将随着n 增大而减小.或者说,绝对偏差小于任一给定量的可能性将随着增大而接近1,即上式等价于1)(lim =<-∞→εξξn n P .特别当ξ为退化分布时,即()1==c P ξ,则称序列{}n ξ依概率收敛于c ,即c Pn −→−ξ.下面, 我们来引入随机变量序列的另外一种收敛:平均收敛.定义 2 如果{}0;,>n n ξξ是r L 中的随机变量, 其中,0>r {}∞<=rr E L ξξ,并且0→-ξξn E , ()∞→n .则称随机变量序列{}N n n ∈,ξ依r 阶平均收敛到随机变量,ξ记作ξξ−→−rLn 当1=r 时简称为依平均收敛,并记为.ξξ−→−Ln在依概率收敛和平均收敛之间存在如下关系:定理 2 r 阶平均收敛蕴含依概率收敛. 证明:因为0lim =-∞→rn n E ξξ,故对,,0N ∃>∀ε当N n >时,有εξξrrn a E <- .又由Chebyshev 不等式知对任何0>a ,有()rrn n aE a P ξξξξ-≤≥-,故()εξξ<≥-a P n ,因此()0lim =≥-∞→a P n n ξξ.但是,反之不真.反例如下:例1 设概率空间为区间上的几何型概率空间,即有 ()1,0=Ω , () 1.0B F = , L P =. 令()0=ωξ, ()1,0∈∀ω, 而易知,对任何0>ε,当∞→n 时,都有 ()()020→=>≤>-nP P n n ξεξξ,所以ξξ−→−Pn ;但是1≡=-n n E E ξξξ, 所以n ξ不依平均收敛到ξ.在概率极限理论中,研究随机变量序列收敛性的同时当然也要研究相应的分布函数序列的收敛性,下面就让我们来谈一谈依分布收敛.定义3 设{}N n x F n ∈),(是一列定义在R 上的有界非降的左连续函数,如果存在一个定义在上的有界非降的左连续函数).(x F 使得),(),()(lim F C x x F x F n n ∈∀=∞→则称{})(x F n 弱收敛到)(x F 记为),()(x F x F n −→−ω并称)(x F 是{})(x F n 的弱极限。
大家注意我们在这里没有使用“分布函数”这个名词。
是因为:分布函数列的弱极限不一定是分布函数。
反例如下:例2 设⎪⎪⎩⎪⎪⎨⎧>≤<-+-≤=.,1;,2;,0)(n x n x n n nx n x x F n,.21)(;=∈∀x F N n显然{})(x F n 是分布函数序列,并且),()(x F x F n −→−ω但是()x F 却不是分布函数. 通过上述两点讨论,我们明确了依分布收敛的含义,从而可以给出如下定义: 定义4 如果{}N n x F n ∈),(是一列分布函数,并且存在分布函数)(x F ,使得)()(x F x F wn −→−,那么我们就称{})(x F n 依分布收敛到)(x F ,记为)()(x F x F d n −→−。
如果{}N n x F n ∈),(是随机变量序列{}N n n ∈,ξ的分布函数序列,而()x F 是随机变量ξ的分布函数,则当)(x F F dn −→−时,称依分布收敛ξ,并记为.ξξ−→−d n应当注意,依分布收敛只是随即变量的分布函数列之间的收敛关系,它们不能反映随即变量自身间的极限关系,此外,我们还有以下结论: 定理3 依概率收敛蕴涵依分布收敛.证明:设n ξ与ξ的分布函数分别为()x F n 和()x F .易知,对任何x y <,有()()()()()y x x x y x y y n n n n -≥-⊂<⊂≥<<<=<ξξξξξξξξ,,,所以()()()y x P x F y F n n -≥-+≤ξξ,从而可由ξξ−→−Pn 推知 ()()x F y F n n i n f lim ∞→≤.同理,对任何x z >,有()()z F x F n n ≤∞→s u p lim .如果()F C x ∈,联立上述二式,并且令x y ↑,x z ↓,那么就有 ()()()()x F x F x F x F n n n n ≤≤≤∞→∞→s u p lim inf lim .所以())(lim x F x F n n =∞←, ()F C x ∈∀,即ξξ−→−dn . 但是,反过来,我们却有:依分布收敛不蕴涵依概率收敛. 反例如下:例3 设()P F ,,Ω为古典型概率空间,其中{}21,ωω=Ω,()⎩⎨⎧===,,1,,021ωωωωωξn ;N n ∈∀ ()⎩⎨⎧===.,0,,121ωωωωωξ 那么n ξ和ξ都服从参数为21的Bernoulli 分布,所以()()x F x F n =,当然有()()x F x F dn −→−,亦即ξξ−→−dn .但是我们有()()1≡-ωξξw n , Ω∈∀ω, N n ∈∀,亦即对任何10<<ε,都有()1≡≥-εξξn P , N n ∈∀,所以ξn不依概率收敛于ξ.但当我们以表示退化于的随机变量时,在依分布收敛与依概率收敛之间却有如下特殊的关系:定理4 c d n −→−ξ等价于c pn −→−ξ.证明:由定理3知c p n −→−ξ蕴含c d n −→−ξ,所以只需证明反过来的蕴含关系.注意退化于德随机变量的分布函数为它只有一个不连续点c x =,所以当c d n −→−ξ时,有()⎩⎨⎧><=∞→.,1;,0lim c x c x x F n n故而对任何0>ε当∞→n 时,有()()()()()001→+-++-=-≤++≥=≥-εεεξεξεξc F c F c P c P c P n n n n n ,即有c pn −→−ξ. 接下来,让我们再介绍概率极限理论中一种重要的收敛,就是几乎必然收敛. 定义5 设随机变量ξ和随机变量序列{}N n n ∈,ξ定义在同一个概率空间()P F ,,Ω上,如果{},1)()(lim |==∞→ωξωξωn P(1)就说{}n ξ a.s.收敛到ξ,记为ξξ→n a.s.由于对固定的ω来说,{})(ωξn 就是数列,因此所谓)()(lim ωξωξ=∞→n n ,就是对任何0>ε,都存在N k ∈,使得只要k n ≥,就有()εωξωξ<-)(n 。
因此,我们可以用事件的语言把(1)表示为(),1)()()(0101=⎪⎪⎭⎫⎝⎛<-=⎪⎪⎭⎫ ⎝⎛<->∞=∞=>∞=∞= εεεωξωξωεξξk k n n k k n n P P(2)(2)中的 0>ε不是可列交,但是可以将其改写为如下的等价形式:.1)1(10=⎪⎪⎭⎫⎝⎛<-∞=∞=∞= m k kn n m P ξξ (3)运用对偶原理,可知(3)等价于.0)1(10=⎪⎪⎭⎫ ⎝⎛≥-∞=∞=∞= m k kn n m P ξξ (4)显然,(4)成立,当且仅当,0)1(1=⎪⎪⎭⎫ ⎝⎛≥-∞=∞= k k n n m P ξξ .N m ∈∀ (5)而(5)成立,当且仅当 ,0)(1=⎪⎪⎭⎫⎝⎛≥-∞=∞= k k n n P εξξ .0>∀ε(6)注意到∞=≥-kn n)(εξξ, N k ∈是下降的事件序列,所以由概率的上连续性知,(6)等价于0)(lim =⎪⎪⎭⎫⎝⎛≥-∞=∞→ k n n n P εξξ, .0>∀ε (7)总结上述讨论,我们得到:定理5 如果随机变量和随机变量序列定义在同一个概率空间上,则得充分必要条件是(7)成立.由定理5可以立即得到:定理6 如果ξξ→n a.s.,则必有ξξ−→−pn . 证明:由于ξξ→n a.s.故由(7)得,对0>∀a ,对0>∀ε,存在K ,当Kk >时,有()εξξ<⎪⎪⎭⎫ ⎝⎛≥-∞= k n n a P ,又因为()() ∞=≥-⊂≥-kn nn a a ξξξξ,故()()εξξξξ<⎪⎪⎭⎫⎝⎛≥-≤≥-∞= k n n na P a P ,因此,由依概率收敛的定义知ξξ−→−pn . 对于r L 收敛与a.s.收敛,我们有:定理 7 r L 收敛与a.s.收敛互不蕴涵.我们来看例中的随机变量序列{}N n n ∈,ξ与0≡ξ,不难证明有()ξωξ≡=∞→0lim n n ,Ω∈∀ω,因此ξξ→n a.s.,但是我们已经证明n ξ不依平均收敛于ξ,故a.s.收敛不蕴含r L 收敛. 反过来的例子如下:例4 仍将()p F ,,Ω取为区间()1,0上的几何概型空间,定义0≡ξ,令⎪⎪⎭⎫⎝⎛-+<<-=m mm m nn n I 22122ωξ, 122+<≤m m n , N m ∈∀ . 不难看出,对任何0>r ,都有0→=-rnrn E E ξξξ,故ξξ−→−rLn .但是,只要ω不是有理数,那么都有无限多个n 使得()1=ωξn ,故n ξ不a.s.收敛于ξ. 另外,由a.s.收敛我们还可引入另一种收敛,即完全收敛. 定义 6 设是{}n ξ随机变量序列,ξ是随机变量.如果对任一0>ε,有()∑∞=∞<≥-1n nP εξξ,那么就称随机变量序列{}n ξ完全收敛于随即变量ξ.显然完全收敛蕴涵a.s.收敛.因为事件序列的无穷多次发生和随机变量的 a.s.收敛之间有着密切的关系,所以接下来我们介绍无穷次发生的概念以及它与a.s.收敛的关系.定义7 设{}N n A n ∈,是概率空间()P F ,,Ω中的一列事件,如果存在无穷多个n ,使得n A ∈ω,我们就称事件序列{}n A 无穷多次发生,记作{}..,o i A n .上述定义中的..o i 是英语词汇infinitely often 的缩写.关于事件序列的无穷多次发生,我们有:定理8 如果{}N n A n ∈,是概率空间()P F ,,Ω中的一列事件,则{}...,1 ∞=∞==k k n n n A o i A证明:易知,{}⇔∈..,o i A n ω存在无穷多个n ,使得⇔∈n A ω对任何N k ∈,存在N n ≥,使得 ∞=∞=∈⇔∈1k kn n n A A ωω.运用上述概念与前面的讨论,我们可得:定理9 设{}N n n ∈,ξ为一列随机变量,ξ为随机变量.则n ξ a.s.收敛于ξ的充分必要条件是对0>∀ε,有()0..,=≥-o i P n εξξ.证明:因为ξξ→n a.s.⇔0)(lim =⎪⎪⎭⎫⎝⎛≥-∞=∞← k n n n P εξξ,.0>∀ε⇔,0)(1=⎪⎪⎭⎫ ⎝⎛≥-∞=∞= k k n n P εξξ .0>∀ε(因 ∞=≥-kn n )(εξξ,N k ∈是下降的事件序列,所以由概率的上连续性可知)⇔ ()0..,=≥-o i P n εξξ,0>∀ε.综上所述,我们可知随机变量序列中以上几种收敛之间有着如下关系: 1. r L 收敛与a.s.收敛互不蕴涵;2. r L 收敛与 a.s.收敛都蕴涵依概率收敛;但依概率收敛不蕴涵r L 收敛和 a.s.收敛;3. 依概率收敛蕴涵依分布收敛;但依分布收敛不蕴涵依概率收敛;4. 对于退化的随机变量,有C C d n p n −→−⇔−→−ξξ; 5. 完全收敛蕴涵a.s.收敛;但a.s.收敛不蕴涵完全收敛;6. 对于事件序列的无穷次发生和收敛,有ξξ→n a.s.⇔()0..,=≥-o i P n εξξ,0>∀ε.参考文献:[1] 林正炎,陆传荣等.概率极限理论基础.北京:高等教育出版社,1999 [2] 林正炎,白志东等.概率不等式.北京:科学出版社,2006[3] [苏]B.B.佩特罗夫著,苏淳译.独立随机变量之和的极限定理.安徽:中国科学技术大学出版社,1987[4] 胡迪鹤.分析概率论.北京:科学出版社,1997。