一些有用的结论和证明12tttYBBXu12ttYBBX12tttYbbXe12ttYbbX12ttteYbbX一、一元线性回归模型的参数最小二乘估计量的推导:对于总体回归模型和总体回归函数:其样本回归模型和样本回归函数,由样本回归模型得到:12212,()ttbbMinYbbX21212()0ttteYbbXb21222()0tttteYbbXXb最小二乘估计量的求解过程可以归结为如下问题:122,tbbMine即:求解该问题,有如下一阶条件:续上:122222221,,1()ttttttttttttttttbYbXXYXYXYnXYxynbxXXyYYXnXxXXn其中,1212()0()0tttttYbbXYbbXX化简得到如下正规方程:由正规方程得到如下解:续上:二、残差一些特性的证明1.样本回归线过样本均值点,即有:证明:根据第一个正规方程就可以得到以上结论。证毕2.证明:12YbbX/0ieen0)()ˆ(2121iiiiiiiXbnbYXbbYYYe以上结论,用到了第一个正规方程。证毕续上0iieXˆ0iieY3.证明:12()0iiiiieXYbbXX1212ˆ()0iiiiiiieYebbXbebeX以上结论用到了第二个正规方程证毕4.证明:证毕三、证明最小二乘估计量是最优线性无偏估计量:1.线性(1)关于b2。证:22222ttttttttttttttxyxYbxxxYxxcYcx其中,由于ct是非随机变量,所以b2是关于Yt的线性函数。21212()ttttttttttbcYcBBXucBcBXcu又由于:所以,b2也是ut的线性函数。续上:(2)关于b1。证:121()1ittttttttbYbXYXcYnXcYnDYDXcn其中,所以,b1也是Yt的线性函数。又由于,11212()ttttttttttbDYDBBXuDBDBXDu所以,b1也是ut的线性函数。续上:2.无偏性(1)关于b2。2121212122()(())()(())0ttttttttttttttttEbEcBBXuEBcBcXcuBcBcXcEuBcBcXB由此可知,b2是B2的无偏估计量。(2)关于b11121212121()(())()(())0ttttttttttttttttEbEDBBXuEBDBDXDuBDBDXDEuBDBDXB所以,b1是B1的无偏估计量。3.有效性首先求解b1和b2的方差112122222222211223312121313222212()(())(())(())(())(())00((()()))()()()()0ttttttttttttttttijijiVarbVarDYVarDBBXuVarBDVarBDXVarDuEDuEDuEDuEDuDuDuEDDuuDDuuDDuuDDD2222222221()ttttDXnxxnXnx续上:因为2222222()2ttttxXXXnXnXXnX所以2212()ttXVarbnx续上:21212222222()()(())()()()00(())ttttttttttttttVarbVarcYVarcBBXuVarBcVarBcXVarcucEucx有效性证明假定、是用其他计量经济方法得到的任一组线性无偏估计量,下面证明最小二乘估计量满足1b2b(1)关于b2由于是一元线性回归模型的线性无偏估计量,令1122()()()()VarbVarbVarbVarb2b2ttbY其中,1,2,,ttntttcg。不是一般性,令。这里2tttxcx。续上:于是21212()ttttttttbBBXuBBXu由于是的无偏估计量,所以,由此可知21212()()ttttttttEbEBBXuBBX2b2B22()EbB0t1ttX,而()tttttcgcgttttttXcXgX续上:又由于0,1tttcgX因此0,0tttggX由于22ttbBu所以2222()()tttVarbVarBu222222222222()222ttttttttttttttttttttcgcgcgxgcgxXgXgcgxcg续上:而因此22222222222()()()tttttVarbcggxVarbg所以22()()VarbVarb(2)关于b1其证明和b2类似。四、关于判定系数和相关系数之间的关系2rr根据判定系数的定义知道:22222ˆˆˆ()()(1)()iiiiYYYYrYYyYYˆ其中有:1212ˆˆiiYbbXYbbX又知:2ˆˆ()iiYYbx把上式带入(1)式得到:22222(2)iibxry又知:22iiixyxb将带入(2)式可得到:2b2222)(iiiiyxyxr