数理统计中的几种简单估计方法.docVIP

数理统计中的几种统计推断方法 ——导学文章之九 　数理统计的基本问题是根据样本所提供的信息，对总体的分布以及分布的数字特征作出统计推断。统计推断的主要内容分为两大类：一是参数估计问题，另一类是假设检验问题。 　本篇文章主要讨论总体参数的点估计、区间估计和假设检验。 点估计 矩估计 首先讲“矩”的概念， 定义：设X是随机变量，k是一正整数，若存在，则称为随机变量X的k阶原点矩，记为；若存在，则称它为X的k阶中心矩，记为。 显然，数学期望EX就是１阶原点矩，方差DX就是２阶中心矩。 简单的说就是用样本矩去估计相应的总体矩，用样本矩的连续函数去估计相应的总体矩的连续函数。矩估计法的理论基础是大数定理。因为大数定理告诉我们样本矩依概率收敛于总体的相应矩，样本矩的连续函数依概率收敛于相应总体矩的连续函数。 我们通常样本的均值去估计总体的均值：即总体为X时，我们从中取出n个样本，我们认为总体的均值就是，（当然这只是对总体均值的一种估计，当然会有误差） 当存在的时候，我们通常用作为总体X的的估计 一般地，我们用作为总体X的的估计，用作为总体的的估计。 例：设总体X在上服从均匀分布，参数未知，是一个样本，求的矩估计量。 解：由矩估计法知道： 由于，因此 用矩估计法，也即用作为的估计，用作为的估计， 为了计算方便，我们记，记， 即有， 解得， 再联立解关于的方程组得的矩估计量分别为 2、极大似然估计 ⑴ 对于连续型总体X，设它的密度函数为，其中是需要估计的未知参数。 设是来自总体X的一个样本，则的联合密度函数为： 对于给定的一组样本值，记联合密度 则称L为样本的似然函数 ⑵ 若X为离散型总体，它的概率分布为： 对于给定的一组样本观测值，记联合密度 则称L为样本的似然函数 ⑶ 具体求法 　　对于已经给定的样本观测值来说，似然函数L是关于待估计的参数的函数，因此我们应该想办法通过似然函数L求出参数值。 这里我们求法的思想来源于多元函数求极大值： 也即，我们把看作关于的多元函数，我们要求得适当的的值，使得取最大值。 解释：实际上表示随机变量取得样本值时的联合概率，我们在一次试验中事件已经发生，我们就有理由认为，参数必须保证此时的概率最大，也即：参数的值应该是使得最大的点。 这样我们的方法就是多元函数求极大值的方法。 极大似然估计的具体步骤为： ① 求出似然函数； ② 计算关于的函数的极大值点， 我们由微积分的知识知道，实际问题中的极大值点就是函数的驻点，也就是每个偏导数都为0的点，即 （一般称该方程组为似然方程组） 但是在实际计算中，由于都是乘积，因此以上方程组求解不太容易，这时候我们由微积分的知识知道到函数和它的对数函数有相同的极大值点，因此我把问题转化为求的极大值点，这样把乘积问题转化为了和差问题，在某些复杂问题中可以大大减轻计算！ （一般称该方程组为对数似然方程组） 求解这个方程组即得到 ③ 上个步骤求出的就是参数的估计值。 二、区间估计 由于总体的未知参数的估计量是随机变量，无论这个估计量的性质有多好，通过一个样本值所得到的估计值，只能是未知参数的近似值，而不是的真值。并且样本值不同所得到的估计值也不同。那么的真值在什么范围内呢？能不能通过样本，寻找一个区间，以一定的把握包含总体未知参数呢？这就是总体未知参数的区间估计问题。 区间估计严格的定义为： 定义：设总体X的分布函数含有一个未知参数，对于给定值，若由样本确定的两个的两个统计量和满足 则称随机区间是参数的置信度为的置信区间，分别趁称为置信度为的双侧置信区间的置信下限和置信上限，称为置信度。 单个正态总体的的数学期望和方差的区间估计是我们重点要求掌握的知识点，大家可以好好阅读教材第189—198面，实际上课本把这种区间估计分各种情形的结论总结成了第209面的表格。大家在理解这些区间估计的实质后，应该把表格的结论和公式记住，往往在实际解题的时候我们只需要套用这些结论就可以了！ 三、假设检验 所谓假设检验，顾名思义就是先假设再检验，实际上有点类似于反证法，在实际问题中我们往往需要对未知总体提出某中假设或推断，但是我们的假设可能是错的，也可能是正确的，这时候我们就需要利用一个抽样的样本，通过一定的方法，检验这个假设是否合理，从而作出接受或者拒绝这个假设的结论。 假设检验的基本原理是——小概率事件原理，也即：我们认为小概率事件在一次试验中几乎不可能发生，如果我们在抽取的样本观测值下，居然使得小概率事件发生了，我们就有理由否定原假设。 在明确一个假设检验问题的性质与基本前提（包括分布类型是否已知，如果类型已知，分布中包含哪些未知参数等等）之后，假设检验的一般步骤如下： ⑴ 充分考虑和利用已知的