第七章新(多重共线性)

Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,经济计量学,主讲,教师,：,张士云,教授,安徽,农业大学经贸学院,本科班,课程,第七章 多 重 共 线 性,在实践中，关于线性回归的基本假定不能全部满足，,出现基本假定违背。主要包括：,（,1,）随机项序列不是同方差，而是异方差的；,（,2,）随机项序列相关，即存在自相关；,（,3,）解释变量与随机项相关；,（,4,）解释变量之间线性相关，存在多重共线性。,多重共线性是对第（,4,）个基本假定的违反，导致,OLS,估计量失去优良性。,第一节 多重共线性的概念,第二节 多重共线性的后果,第三节 多重共线性的检验,第四节 多重共线性的修正方法,第五节 案例,一、多重共线性的定义,多重共线性是指解释变量,X,i,之间存在完全的或近似的线性关系。在线性模型中，解释变量的,观察值距阵,X,(,包括常数项,),其秩等于模型中的解释变量的个数加一,rank(,X,)=,k,+,1,如果此假定不成立，则称解释变量,X,i,之间存在多重共线性,至少有一列向量可由其它列向量线性表示。如,X,2,=,X,1,X,2,与,X,1,的相关系数为,1,，解释变量,X,2,对因变量,Y,的作用可由,X,1,完全替代。,第一节 多重共线性的概念,1,、经济变量之间的相互依存关系,如替代品价格之间会存在多重共线性,2,、滞后变量的引入,同一变量的前后期之值可能是高度线性相关的,3,、时间趋势影响,经济繁荣和经济衰退,时间序列样本建立线性模型时，往往存在多重共线。,4,、样本资料方面的原因,样本资料推算数据往往存在多重共线性,二、产生多重共线性的原因,一、完全多重共线性的影响,1,、无法估计模型参数,y,i,=b,1,x,1,+b,2,x,2,第二节 多重共线性的后果,对上述方程两边同乘观察值距阵,X,的转置距阵,一、完全多重共线性的影响,完全共线性,:XX=0,(XX),-1,不存在，,R,23,=1,；,例：,2,、模型参数估计方差无穷大,当存在多重共线性时，利用,OLS,无法估计参数，,即参数估计值是不确定的，且估计值的方差无穷大。,1,、,可以估计参数，但参数估计不稳定,2,、参数估计量的方差增大，使参数估计量的精度降低。不能正确判断各解释变量对被解释变量的贡献。,3,、由于参数估计量的方差和标准差增大，在对参数进行显著性检验性,t,检验时，增大了接受零假设的可能性。,4,、若作区间,预测也将降低预测的,精度。,二、不完全多重共线性的影响,1,、简单相关系数法,解释变量组的相关矩阵中解释变量间的简单相关系数的绝对值甚至大于被解释变量与解释变量之间的简单相关系数的绝对值,cor,X1 X2,几何度量,第三节 多重共线性的检验,X,2,X,1,X,3,(,x,y,),2,、综合统计检验法,若,R,2,F,均很大,而各,t,值均偏小,则可以认为存在多重共线性,3,、,用,F,检验,确定哪些解释变量是多重共线的,对每个解释变量,X,j,作它与其它解释变量的回归，并计算样本决定系数,R,2,若,F,Fa,，,则认为,Xj,与,X,1,X,j-1,X,j+1,X,k,多重共线显著,4,、用,t,检验,来找出哪些解释变量是造成多重共线的原因,若,T T,a,，即,X,j,与,X,i,是引起多重共线的原因。,2,第四节 多重共线性的修正方法,一、删除不重要的变量,1,、将证实为多重共线性原因的变量删除,2,、由实际经济分析确定变量的相对重要性，删除不太重要的变量,3,、变量删除不当，会产生模型设计偏倚,二、改变解释变量形式,1,、采用相对数量,如对于需求函数,Q=b,0,+b,1,Y+b,2,P,0,+b,3,P,1,+u,商品价格,P,0,和替代商品价格,P,1,可能高度线性相关，可将模型改为如下形式：,Q=a,0,+a,1,Y+a,3,(,P,0,/P,1,),+u,2,、采用增量型变量,如对于消费函数,C,t,=b,0,+b,1,Y,t,+b,2,Y,t-1,+u,本期收入,Y,t,和上期收入,Y,t-1,可能高度线性相关，可将模型改为如下形式：,C,t,=a,0,+a,1,Y,t,+a,2,Y,t,+u,Y,t,=,Y,t,Y,t-1,3,、改变解释变量样本信息,（,1,）改变样本,（,2,）增加样本容量,样本容量,n,增加，,x,2,增大，,var(,b,1,),的值会,降低，抵消方差增大的影响。,三、利用已知信息进行参数约束修正,如对于,CD,生产函数的对数形式,lnY,=,lnA,+,a,lnL,+,b,lnk,+u,资金和劳动之间可能高度线性相关，如假定规模报酬不变，施加约束条件,a,+,b,=1,可将模型改为如下形式：,ln,(,Y,/K,),=,lnA,+,a,ln,(,L/K,),+u,b,=1,a,四、逐步回归法,逐步回归法分为逐个剔除法与逐个引入法,“,逐步,”,指的是在使用回归分析方法建立模型时，一次只能剔除,（减少）,一个解释变量或者一次只能引入,（增加）,一个解释变量。进行一次剔除或引入称为,“,一步,”,，这样逐步的进行下去，直到最后得到模型达到,“,最优,”,模型中无不显著解释变量。,引入的准则：,引入解释变量后使模型的拟合优度（及,F,）,显著增加的，应当引入；否则不引入。,剔除的准则：,剔除解释变量后使模型的拟合优度（及,F,）,不显著的减少，应当剔除；否则不剔除。,1,、逐步剔除法,先将一切可能的解释变量全部引入模型,再依据各个解释变量的显著性,每次从模型中剔除一个不显著的解释变量,从不显著的解释变量中，剔除,t,最小（对应的概率,P,最大）的解释变量,直至留在模型中的全部解释变量影响显著，得到最简洁的模型（模型中不包含不显著的解释变量）。,逐步剔除与多重共线性,如果剔除一个解释变量，使模型拟合优度（及,F,）,显著地减少，那么这个剔除是不应当的。但证明了该剔除变量与留在模型中的解释变量不构成多重共线。它对解释变量,Y,的贡献不能由已在模型中的解释变量线性表出。,如果剔除一个解释变量，使模型拟合优度（及,F,）,不显著地减少，那么这个剔除是应当的。而且证明了它与留在模型中的解释变量构成多重共线。它可由这些变量线性表出，所以剔除不至于引起拟合优度的减少。,2,、逐个引入法,如果引入解释变量，使模型拟合优度显著地增加，那么这个引入是应当的，而且它与模型中已有的解释变量不构成多重共线。,如果引入解释变量，使模型拟合优度不显著地增加，那么这个引入是不应当的，而且它与已在型中的解释变量构成多重共线，它可由这些解释变量线性表出。也就是说，它对被解释变量的贡献已由这些共线变量提供。所以，引入它并不能提高拟合优度。,第五节 案例一,中国粮食生产函数,根据理论和经验分析，影响粮食生产（,Y,）,的主要因素有：,农业化肥施用量（,X,1,）；,粮食播种面积,(,X,2,),成灾面积,(,X,3,);,农业机械总动力,(,X,4,);,农业劳动力,(,X,5,),已知中国粮食生产的相关数据，建立中国粮食生产函数：,Y=,0,+,1,X,1,+,2,X,2,+,3,X,3,+,4,X,4,+,4,X,5,+,1,、用,OLS,法估计上述模型,：,R,2,接近于,1,；,给定,=5%,，得,F,临界值,F,0.05,(5,12)=3.11,F=638.4 15.19,，,故认为上述粮食生产的总体线性关系显著成立。,但,X,4,、,X,5,的参数未通过,t,检验，且符号不正确，故,解释变量间可能存在多重共线性,。,(-0.91)(8.39)*(3.32)*(-2.81)*(-1.45)(-0.14),2,、检验简单相关系数,发现：,X,1,与,X,4,间存在高度相关性。,列出,X,1,，,X,2,，,X,3,，,X,4,，,X,5,的相关系数矩阵：,3,、找出最简单的回归形式,可见，应选,第,1,个式子,为初始的回归模型。,分别作,Y,与,X,1,，,X,2,，,X,4,，,X,5,间的回归：,(25.58)(11.49),R,2,=0.8919 F=132.1 DW=1.56,(-0.49)(1.14),R,2,=0.075 F=1.30 DW=0.12,(17.45)(6.68),R,2,=0.7527 F=48.7 DW=1.11,(-1.04)(2.66),R,2,=0.3064 F=7.07 DW=0.36,4,、逐步回归,将其他解释变量分别导入上述初始回归模型，寻找最佳回归方程。,4,、逐步回归,将其他解释变量分别导入上述初始回归模型，寻找最佳回归方程。,4,、逐步回归,将其他解释变量分别导入上述初始回归模型，寻找最佳回归方程。,4,、逐步回归,将其他解释变量分别导入上述初始回归模型，寻找最佳回归方程。,4,、逐步回归,将其他解释变量分别导入上述初始回归模型，寻找最佳回归方程。,回归方程以,Y=f(,X,1,，,X,2,，,X,3,),为最优：,5,、结论,第五节 案例二,家庭消费支出生产函数,用前,10,组数据建立模型：,对前,10,组数据运用逐步回归的思路建立模型：,扩大样本数据重新建立模型：,扩大样本数据重新建立模型：,