内容正文:
第五章
大数定律和中心极限定理
大数定律和中心极限定理就是使用极限方法研究大量随机现象统计规律性的。
阐明大量重复试验的平均结果具有稳定性的一
系列定律都称为大数定律。
论证随机变量(试验结果)之和渐进服从某一
分布的定理称为中心极限定理。
本章概述
第五章 大数定律和中心极限定理
第1节 大数定律
第2节 中心极限定律
第1节 大数定律
第1节 大数定律
一、切比雪夫不等式
二、大数定律
§5.1 大数定律
一 、切比雪夫不等式
(ε是任一正数)
1. 对于任何具有有限方差的随机变量 X ,都有
则
证明:(以连续型随机变量为例)设X的概率密度为f(x),
1. 切比雪夫不等式等价形式
例1.估计
事件发生的概率.
解:
⒈ 证明大数定律;⒉ 估计事件的概率.
一 、切比雪夫不等式
2. 切比雪夫不等式的作用
例2.若在每次试验中,A发生的概率为0.5,进行1000次独立试验,估计 A 发生 400~600 次之间的概率.
解:因 X ~B(1000 , 0.5),E(X)=500,D(X)=250,
所以 P{ 400 < X < 600 } = P{ | X-500 | < 100 }.
P{ | X-500 | < 100 }
大数定律使用极限方法研究大量随机现象统计规律性的。
人们在长期的实践中发现,频率以及大量测量值
的算术平均值具有稳定性,也就是说,无论个别测量
值如何,其平均结果实际上与个别测量值的特征无
关,几乎不再是随机的了。这种稳定性问题如何从理
论上给出解释?这正是大数定律要解决的问题。
阐明大量重复试验的平均结果具有稳定性的一
系列定律都称为大数定律。
二、大数定律
1. 大数定律的一般形式
定义:设{Xk}是随机变量序列,数学期望E(Xk)
(k=1,2,...)存在,若对于任意ε >0,有
则称随机变量序列{Xn}服从大数定律.
下面研究随机变量序列{Xk}满足何条件时,{Xk}服从大数定律. 很遗憾不存在充分必要条件,下面寻求若干充分条件,从而得到不同的大数定律.
或
或,对于任意ε>0,当n充分大时,不等式
定理1 (切比雪夫大数定律) 如果X1,X2,…,Xn,…是相互独立的随机变量序列,每一个Xi都有数学期望E(Xi)和有限的方差D(Xi),且方差有公共的上界,即
则对于任意ε>0,有
依概率1成立.
二 、大数定律
意即,随机变量的算术平均值将比较紧密地聚集在它的数学期望附近.
切比雪夫
证:
又因
由切比雪夫不等式可得
所以,
切比雪夫大数定律表明, 相互独立的随机变量的算术平均值,
与其数学期望的差,
在n充分大时以概率1是一个无穷小量.
这意味着在n充分大时,
地聚集在它的数学期望附近.
因为X1,X2,…,Xn相互独立,所以
随机变量的算术平均值将比较紧密
说明:
① 在不变的条件下, 重复测量n次所得到的n个观察值,
x1,x2, …, xn, 可看作服从同一分布的n个相互独立的随机变量
X1,X2,…,Xn的试验值.
② n充分大时, x1,x2, …, xn的算术平均值与真值的误差
依概率1任意小.
推论 设随机变量X1,X2,…,Xn,…独立同分布,且有
E(Xk) =m,D(Xk) =s 2, k =1,2,…
则当n→∞时,对任意ε>0,有
这就是以频率定义概率的合理性依据.
定理2 (贝努里大数定律)设n重贝努里试验中事件A发生nA次, 每次试验事件A发生的概率p,则对任意ε>0 , 有
定义 (依概率收敛)设
是一个互相独立的
随机变量序列,
a是一个常数,若对于任意正数 ,有
则称序列
依概率(或依概率1)收敛于a .
贝努里
下面给出的独立同分布下的大数定律,不要求随机变量的方差存在.
设随机变量序列X1,X2, …独立同分布,具有有限的数学期E(Xi)=μ, i=1,2,…, 则对任给ε >0 ,
定理3(辛钦大数定律)
辛钦
辛钦大数定律为寻找随机变量的期望值提供了一条实际可行的途径.
作业:113页
1,2
第2节 中心极限定理
一、独立同分布下的中心极限定理
二、二项分布的近似分布
在一