依概率收敛与弱数定律.doc

§2 依概率收敛与弱大数定律 ? 一、依概率收敛 二、弱大数定律 ? 一、依概率收敛 尽管分布函数完全反映了随机变量取值的分布规律, 但是两个不同的随机变量可以有相同的分布函数. 例如, 向区间[0,1]上随机等可能投点,ω表示落点的位置，定义 . (1) 则ξ和η具有相同的分布函数 F(x)= (2) 如果定义, n, 则, 但. 这表明分布函数收敛性并不能反映随机变量序列取值之间的接近程度. 为此需要引入另外的收敛性. 定义1 设和是定义在同一概率空间 (Ω,F, P)上的随机变量序列. 如果对任意ε0, =0, (3) 或 =1, 则称依概率收敛(convergence in probability)于，记作. 注 定义1要求所有和的定义域相同. 可直观地理解为：除去极小的可能性，只要n充分大，与的取值就可以任意接近. 从上面例子可以看出, 由并不能导出. 关于这两种收敛性之间的关系，我们有下面的定理. 定理1 设和是定义在概率空间 (Ω,F, P)上的随机变量序列. 1. 如果, 则 . 2. 如果, c为常数，则. 证 1. 设F和分别是和的分布函数，x表示F的连续点. 任意给定ε0, ( , 因此 F(x. 令n→∞, 由于, 故, 从而 F(x. (4) 类似地 , 从而 . 令n→∞, 得 . (5) 连接(4) (5)两式，对任意ε0, 有 F(x. 由于F在x点连续，令ε→0, 就得 , 即. 2. 如果，则 . 因此对任意,有 =1 (n→∞). 定理证毕. 例1 设{}独立同分布，都为[0, a]上的均匀分布, .求证 . 证 由定理1, 只须证明的分布函数, 其中D(x-a)是在a点的退化分布函数. 从第二章知道：若的分布函数为F(x), 则的分布函数为. 现在的分布函数为 F(x)= 故 → D(x-a)= (n→∞). 证毕. 依概率收敛有许多性质类似于微积分中数列极限的性质, 下面仅举两个例子说明这类问题的证题方法. 大部分性质放在习题中留给读者自己证明. 例2 设和是定义在概率空间 (Ω,F, P)上的随机变量序列. 求证： 1. 若，, 则P(ξ=η)=1. 2. 若, f是 (-∞, ∞) 上的连续函数，则f (). 证 1. 任意给定ε0，我们有 (|, 从而 P(|. 由, , 并注意到上式左方与n无关, 得P(|)=0. 进一步, P(|=0, 即P(ξ=η)=1. 2. 任意给定，存在M0, 使得 P(|ξ|P(|ξ|. (6) 由于, 故存在, 当n时, P, 因此 (7) 又因(x) 在 (-∞,∞)上连续，从而在[-M, M]上一致连续. 对给定的ε0, 存在δ0, 当|x-y|δ时，|(x)-(y)|ε. 这样 P(. (8) 对上面的δ, 存在, 当n时, P. (9) 结合(6) (7) (8) (9)式, 当n时， P(|, 从而 f (). 为了进一步讨论依概率收敛的条件，我们给出下列切比雪夫不等式(第三章§2)的推广. 定理2 （马尔科夫不等式） 设ξ是定义在概率空间 (Ω, F, P)上的随机变量，f (x)是[0, ∞) 上非负单调不减函数，则对任意x 0, P(|ξ| x). (10) 证 当Ef(|ξ|)=∞时，(10)式显然成立. 设Ef(|ξ|)∞,ξ的分布函数为F(x). 因f (x) 单调不减，故 |y| x 时, f(|,从而 . 定理3 当且仅当 E→0. 证 充分性：注意到f (x)=在[0, ∞]上非负单调不减, 对任意ε0, 由定理2 P(|→0, 即. 必要性：设的分布函数是. 对任意ε0, =. (11) 由于, 在(11)式两边先令n→∞, 再让ε→0，即得证E→0. 二、弱大数定律 考虑随机试验E中的事件A，假设其发生的概率为p (0 p 1), 现在独立重复地做试验n次——n重贝努里试验. 令 , . 则P(=1)=p, P(=0)=1-p. 是做试验E n次后A发生的次数，可能值0,1,2,…,n, 视试验结果而定. 熟知 E=p. 在第一章§1中曾经指出: 当时频率稳定到（在某种意义下收敛于）概率p. 我们想知道与p之间的差究竟有多大. 首先应该意识到不可能期望对任意给定的 0ε1, 当n充分大时, |-p|ε对所有试验结果成立. 事实上，当0