信息与计算科学《概率论与数理统计》教案—58—第六章点估计一、教学目标与要求掌握求矩估计和极大似然估计的方法,矩估计和极大似然估计的性质,估计量的评价标准。了解点估计的概念,最优无偏估计的概念。二、重点和难点重点:两种估计求法,估计量的评价标准。难点:估计量的评价。三、教学内容§6.1点估计的基本概念针对总体的未知参数,构造统计量),,,(ˆˆ21nXXX,用),,,(ˆ21nxxx作为的近似值(估计值),这种统计方法称为参数的点估计。称统计量),,,(ˆ21nXXX为的估计量。今后凡求的估计即求的估计量,不是求估计值。§6.2矩估计和极大似然估计一.矩估计原理:kPnkiEXXn11(辛钦大数定律)步骤:1.求sKfEXskk,,2,1).,,,(212.令sKfXnsknKi,,2,1),ˆ,,ˆ,ˆ(12113.解方程组2.得解sˆ,,ˆ,ˆ21,此即s,,,21的矩阵估计。例1.nXX,,1是来自母体X的样本,2,DXEX,求2,的矩估计。信息与计算科学《概率论与数理统计》教案—59—例2.),1(~pBX,求p的矩估计。例3.)(),,(~babaUX,求ba,的矩估计。注:若ˆ是的矩估计,则)ˆ(g是)(g的矩估计。二.极大似然估计(最大似然估计)1.原理:一个随机试验可能出现的结果有,,,CBA等,若一次试验出现了结果A,则认为A发生的概率在所有可能结果中出现的概率最大。(试验条件最有利于A出现)设总体X的分布律为),,,(),;(21nxxxxf,nxxx,,,21是样本值,则发生事件),,,(2211nnxXxXxX的概率:)(ˆ);(),,,(12211LxfxXxXxXPniinn。既然在一次试验中出现结果(nxxx,,,21),根据极大似然原理,则认为此概率)(L应达到最大。此时若有ˆ,使)(sup)ˆ(LL,则称ˆ为的极大似然估计。2.步骤:1)写出似然函数niixfL1);()(,);((ixf为概率函数);(概率函数);((ixf:当总体是离散型时为事件的概率;当总体是连续型时为密度函数值。)2)求ˆ,使)(sup)ˆ(LL,ˆ为的极大似然估计。i)取对数nixfL1);(ln)(ln信息与计算科学《概率论与数理统计》教案—60—ii)令sjLjs,,2,1,0),,(ln1iii)解上式得驻点,检验各驻点是否为最大值点,若是,则该驻点为所求。例1X~),(2N,求2,的极大似然估计。例2X~),1(pB,求p的极大似然估计。例3X~),(baU,求ba,的极大似然估计。例4(5,208P)3极大似然估计的性质定理:ˆ是极大似然估计,)(uu存在单值反函数,)(u,则)ˆ(ˆuu是)(u的极大似然估计。(此定理对参数向量也成立)证:(略)例5(7,209P)例6设12,15,9,18,13,9,7,11,13,10是来自总体),(~2NX的样本值,求)10(XP的极大似然估计。)068.3)(1,7.11(12niinxxnsx§6.3估计量的评价1、无偏性:定义:ˆ是的估计量,若,ˆE,则称ˆ是的一个无偏估计。如X是EX的无偏估计,1X是EX的无偏估计。212)(1niinXXnS不是总信息与计算科学《概率论与数理统计》教案—61—体方差2的无偏估计,因为2221nnESn,而212)(11niiXXnS是总体方差2的无偏估计。2、有效性:定义:21ˆ,ˆ都是的无偏估计,如果1ˆD,2ˆD都存在,且1ˆD2ˆD,,则称1ˆ较2ˆ更有效。如:X,1X它们都是总体均值的无偏估计,XD=122DXn,所以X较1X有效。可以证明样本均值X是总体均值的最小方差无偏估计。3、一致性(相合性、相容性):定义:nˆ是的估计量,若nˆP,则称nˆ是的一致估计。矩估计都是一致估计。如X是总体均值的一致估计,2nS是总体方差2的一致估计等。例1设为总体X~其它,0,.)()1(cxxfxc,其中0c为已知,1为未知参数,求的矩估计和极大似然估计。