第三章(6) 受约束回归.ppt

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,3.6 受约束回归,在建立回归模型时，有时根据经济理论需对模型中变量的参数施加一定的约束条件。,如,：,0阶齐次性,条件的消费需求函数,1,阶齐次性,条件的,C-D,生产函数,模型施加约束条件后进行回归,，称为,受约束回归,（,restricted regression）,;,不加任何约束的回归称,为,无约束回归,（,unrestricted regression）。,受约束回归,一、模型参数的线性约束,二、对回归模型增加或减少解释变量,三、参数的稳定性,*四、非线性约束,一、模型参数的线性约束,对模型,施加约束,得,或,(*),(*),如果对（*）式回归得出,则由约束条件可得：,然而，对所考查的具体问题,能否施加约束,？,需进一步进行相应的检验。,常用的检验有,：,F,检验、,x,2,检验与,t,检验,，,主要介绍,F,检验,在同一样本下，记,无约束,样本回归模型为,受约束,样本回归模型为,于是,受约束,样本回归模型的,残差平方和,RSS,R,于是,ee,为,无约束,样本回归模型的,残差平方,和,RSS,U,(*),受约束,与,无约束,模型都有,相同的,TSS,由（*）式,RSS,R,RSS,U,从而,ESS,R,ESS,U,这意味着,，,通常情况下，对模型施加约束条件会降低模型的解释能力,。,但是,，,如果,约束条件,为,真,，则,受约束,回归模型与,无约束,回归模型具有相同的解释能力,，,RSS,R,与,RSS,U,的差异变小。,可用,RSS,R,-,RSS,U,的大小来检验约束的真实性,根据数理统计学的知识：,于是：,讨论：,如果约束条件无效，,RSS,R,与,RSS,U,的差异较大，计算的,F,值也较大。,于是，可用计算的,F,统计量的值与所给定的显著性水平下的临界值作比较，对约束条件的真实性进行检验。,注意,，,k,U,-,k,R,恰为约束条件的个数,。,例3.6.1,中国城镇居民对食品的人均消费需求实例中,，对,零阶齐次性,检验：,取,=5%，,查得,临界值,F,0.05,(1,10)=4.96,判断：,不能拒绝中国城镇居民对食品的人均消费需求函数具有零阶齐次特性这一假设,。,无约束回归:,RSS,U,=0.00324,，,k,U,=3,受约束回归:,RSS,R,=0.00332,，,K,R,=2,样本容量,n=14,，,约束条件个数,k,U,-,k,R,=3-2=1,这里的,F,检验适合所有关于参数线性约束的检验,如：多元回归中对,方程总体线性性,的,F,检验：,H,0,：,j,=0 j=1,2,k,这里：受约束回归模型为,这里，运用了,ESS,R,0,。,二、对回归模型增加或减少解释变量,考虑如下两个回归模型,(*),(*),(*)式可看成是（*）式的,受约束回归：,H0：,相应的统计量为：,如果约束条件为真，即额外的变量,X,k,+1,X,k,+q,对没有解释能力，则统计量较小；,否则，约束条件为假，意味着额外的变量对有较强的解释能力，则统计量较大。,因此，可通过,F,的,计算值,与,临界值,的比较，来判断额外变量是否应包括在模型中。,讨论：,统计量的另一个等价式,三、参数的稳定性,1、邹氏参数稳定性检验,建立模型时往往希望模型的参数是稳定的，即所谓的,结构不变,，这将提高模型的预测与分析功能。,如何检验？,假设,需要建立的模型,为,在两个连续的时间序列（1,2,，,n,1,）,与（,n,1,+1,，n,1,+n,2,）,中，相应的模型分别为：,合并两个时间序列为(1,2,，,n,1,，n,1,+1,，n,1,+n,2,)，,则可写出如下,无约束回,归模型,如果,=,，表示没有发生结构变化，因此可针对如下假设进行检验：,H,0,:,=,(*),式施加上述约束后变换为,受约束,回归模型,(*),（*）,因此，检验的,F,统计量为：,记,RSS,1,与,RSS,2,为在两时间段上分别回归后所得的残差平方和，容易验证，,于是,参数稳定性的检验步骤：,（1）分别以两连续时间序列作为两个样本进行回归，得到相应的残差平方：,RSS,1,与,RSS,2,（2）,将两序列并为一个大样本后进行回归，得到大样本下的残差平方和,RSS,R,（3）,计算,F,统计量的值，与临界值比较：,若,F,值,大于,临界值,，则拒绝原假设，认为发生了结构变化，参数是非稳定的。,该检验也被称为,邹氏参数稳定性检验,（,Chow test for parameter stability,）。,2、邹氏预测检验,上述参数稳定性检验要求,n,2,k,。,如果出现,n,2,F(,n,2,n,1,-k-,1),，,则拒绝原假设，认为预测期发生了结构变化。,例3.6.2,中国城镇居民食品人均消费需求的邹氏检验。,1、参数稳定性检验,19811994：,RSS,1,=0.003240,19952001：,(9.96)(7.14)(-5.13)(1.81),19812001:,(14.83)(27.26)(-3.24)(-11.17),给定,=5%,，查表得临界值,F,0.05,(4,13)=3.18,判断：,F,值临界值，拒绝参数稳定的原假设，表明中国城镇居民食品人均消费需求在1994年前后发生了显著变化。,2、,邹氏预测,检验,给定,=5%,，查表得临界值,F,0.05,(7,10)=3.18,判断,：,F,值临界值，拒绝参数稳定的原假设,*,四、非线性约束,也可对模型参数施加,非线性约束,如对模型,施加非线性约束,1,2,=1,得到,受约束回归模型,:,该模型必需采用,非线性最小二乘法,（,nonlinear least squares,）,进行估计。,非线性约束检验,是建立在,最大似然原理,基础上的,有,最大似然比检验,、,沃尔德检验,与,拉格朗日乘数检验.,1、最大似然比检验,(,likelihood ratio test,LR,),估计:,无约束回归模型与受约束回归模型，,方法:,最大似然法，,检验:,两个似然函数的值的差异是否,“,足够,”,大。,记,L,(,2,),为一似然函数:,无约束回归,:,Max,:,受约束回归,:,Max,:,或,求,极值：,g(,):,以各约束条件为元素的列向量,：以相应拉格朗日乘数为元素的行向量,约束,：,g(,),=,0,受约束,的函数值不会超过,无约束,的函数值,，但如果,约束条件为真,，则两个函数值就非常,“,接近,”,。,由此，定义,似然比,（,likelihood ratio,）,:,如果,比值很小，,说明,两似然函数值差距较大，则应,拒绝,约束条件为真的假设；,如果,比值接近于，,说明,两似然函数值很接近，应,接受,约束条件为真的假设。,具体检验,时，由于大样本下：,h,是约束条件的个数。因此：,通过,LR,统计量的,2,分布特性来进行判断。,在,中国城镇居民人均食品消费需求例,中，对,零阶齐次性,的检验：,LR,=-2(38.57-38.73)=0.32,给出,=,5%,、查得,临界值,2,0.05,(1),3.84,，,判断,：,LR,2,0.05,(1),不拒绝原约束的假设，,表明:,中国城镇居民对食品的人均消费需求函数满足零阶齐次性条件,。,、沃尔德检验,（,Wald,test,W,）,沃尔德检验中，只须估计无约束模型。如对,在所有古典假设都成立的条件下，容易证明,因此，在,1,+,2,=1,的约束条件下,记,可建立,沃尔德统计量:,如果有,h,个约束条件，可得到,h,个统计量,z,1,z,2,z,h,约束条件为真时，可建立,大样本,下的服从自由度为,h,的渐近,2,分布统计量,其中，,Z,为以,z,i,为元素的列向量，,C,是,Z,的方差,-,协方差矩阵。,因此，,W,从总体上测量了无约束回归不满足约束条件的程度。,对,非线性约束,，沃尔德统计量,W,的算法描述要复杂得多。,3、拉格朗日乘数检验,拉格朗日乘数检验则只需估计,受约束,模型.,受约束回归是求最大似然法的极值问题:,是拉格朗日乘数行向量，衡量各约束条件对最大似然函数值的影响程度。,如果某一约束为真，则该约束条件对最大似然函数值的影响很小，于是，相应的拉格朗日乘数的值应接近于零。,因此，拉格朗日乘数检验就是检验某些拉格朗日乘数的值是否“足够大”，如果“足够大”，则拒绝约束条件为真的假设。,拉格朗日统计量,LM,本身是一个关于拉格朗日乘数的复杂的函数，在各约束条件为真的情况下，服从一自由度恰为约束条件个数的渐近,2,分布。,n,为样本容量,，,R,2,为如下被称为,辅助回归,（,auxiliary regression,）,的可决系数:,如果约束是非线性的，辅助回归方程的估计比较复杂，但仍可按（,*,）式计算,LM,统计量的值。,最后，一般地有,:,LM,LRW,同样地，如果为线性约束，,LM,服从一精确的,2,分布：,(*),