统计学计量经济学22一元线性回归模型参数估计

上传人:o**** 文档编号:251914155 上传时间:2024-11-11 格式:PPTX 页数:30 大小:522.63KB
返回 下载 相关 举报
统计学计量经济学22一元线性回归模型参数估计_第1页
第1页 / 共30页
统计学计量经济学22一元线性回归模型参数估计_第2页
第2页 / 共30页
统计学计量经济学22一元线性回归模型参数估计_第3页
第3页 / 共30页
点击查看更多>>
资源描述
单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,#,单方程计量经济学模型分为两大类:,线性模型,和,非线性模型,线性模型中,变量之间的关系呈线性关系,非线性模型中,变量之间的关系呈非线性关系,一元线性回归模型,:只有一个解释变量,i=1,2,n,Y,为被解释变量,,X,为解释变量,,0,与,1,为,待估参数,,,为,随机干扰项,1,11/11/2024,回归分析的主要目的,是要通过样本回归函数(模型),SRF,尽可能准确地估计总体回归函数(模型),PRF,。(参见图,2.1.3,),估计方法,有多种,其种最广泛使用的是,普通最小二乘法,(,ordinary least squares,OLS,)。,为保证参数估计量具有良好的性质,通常对模型提出若干基本假设。,注:,实际这些假设与所采用的估计方法紧密相关。,2,11/11/2024,回归分析的主要目的,:根据样本回归函数,SRF,,估计总体回归函数,PRF,。,注意:,这里,PRF,可能永远无法知道。,即,根据,估计,3,11/11/2024,最小二乘估计,x,y,(,x,n,y,n,),(,x,1,y,1,),(,x,2,y,2,),(,x,i,y,i,),e,i,=,y,i,-,y,i,4,11/11/2024,一、线性回归模型的基本假设,假设,1,、解释变量,X,是确定性变量,不是随机变量;,假设,2,、随机误差项,具有零均值、同方差和不序列相关性:,E(,i,)=0 i=1,2,n,Var(,i,)=,2,i=1,2,n,Cov(,i,j,)=0 i,j i,j=,1,2,n,假设,3,、随机误差项,与解释变量,X,之间不相关:,Cov(X,i,i,)=0 i=1,2,n,假设,4,、,服从零均值、同方差、零协方差的正态分布,i,N(0,2,)i=1,2,n,5,11/11/2024,1,、,如果假设,1,、,2,满足,则假设,3,也满足,;,2,、,如果假设,4,满足,则假设,2,也满足。,注意:,以上假设也称为线性回归模型的,经典假设,或,高斯(,Gauss,)假设,,满足该假设的线性回归模型,也称为,经典线性回归模型,(,Classical Linear Regression Model,CLRM,)。,6,11/11/2024,另外,,在进行模型回归时,还有两个暗含的假设:,假设,5,:随着样本容量的无限增加,解释变量,X,的样本方差趋于一有限常数。即,假设,6,:回归模型是正确设定的,假设,5,旨在排除时间序列数据出现持续上升或下降的变量作为解释变量,因为这类数据不仅使大样本统计推断变得无效,而且往往产生所谓的,伪回归问题,(,spurious regression problem,)。,假设,6,也被称为模型没有,设定偏误,(,specification error,),7,11/11/2024,二、参数的普通最小二乘估计(,OLS,),给定一组样本观测值(,X,i,Y,i,)(,i=1,2,n,)要求样本回归函数尽可能好地拟合这组值,.,普通最小二乘法,(,Ordinary least squares,OLS,)给出的判断标准是:二者之差的平方和,最小。,8,11/11/2024,方程组(,*,)称为,正规方程组,(,normal equations,),。,9,11/11/2024,记,上述参数估计量可以写成:,称为,OLS,估计量的,离差形式,(,deviation form,)。,由于参数的估计结果是通过最小二乘法得到的,故称为,普通,最小二乘估计量,(,ordinary least squares estimators,),。,10,11/11/2024,顺便指出,,记,则有,可得,(*)式也称为,样本回归函数,的,离差形式,。,(*),注意:,在计量经济学中,往往以小写字母表示对均值的离差。,11,11/11/2024,三、参数估计的最大或然法,(ML),最大或然法,(,Maximum Likelihood,简称,ML,),,也称,最大似然法,,是不同于最小二乘法的另一种参数估计方法,是从最大或然原理出发发展起来的其它估计方法的基础。,基本原理,:,对于,最大或然法,,当从模型总体随机抽取,n,组样本观测值后,最合理的参数估计量应该使得从模型中抽取该,n,组样本观测值的概率最大。,12,11/11/2024,在满足基本假设条件下,对一元线性回归模型:,随机抽取,n,组样本观测值(,X,i,Y,i,)(,i=1,2,n,)。,那么,Y,i,服从如下的正态分布:,于是,,Y,的概率函数为,(,i=1,2,n,),假如模型的参数估计量已经求得,为,13,11/11/2024,因为,Y,i,是相互独立的,所以的所有样本观测值的联合概率,也即,或然函数,(likelihood function),为:,将该或然函数极大化,即可求得到模型参数的极大或然估计量。,14,11/11/2024,由于或然函数的极大化与或然函数的对数的极大化是等价的,所以,取对数或然函数如下:,15,11/11/2024,解得模型的参数估计量为:,可见,在满足一系列基本假设的情况下,模型结构参数的,最大或然估计量,与,普通最小二乘估计量,是相同的。,16,11/11/2024,例,2.2.1,:,在上述家庭,可支配收入,-,消费支出,例中,对于所抽出的一组样本数,参数估计的计算可通过下面的表,2.2.1,进行。,17,11/11/2024,因此,由该样本估计的回归方程为:,18,11/11/2024,四、最小二乘估计量的性质,当模型参数估计出后,需考虑参数估计值的精度,即是否能代表总体参数的真值,或者说需考察参数估计量的统计性质。,一个用于考察总体的估计量,可从如下几个方面考察其优劣性:,(,1,)线性性,,即它是否是另一随机变量的线性函数;,(,2,)无偏性,,即它的均值或期望值是否等于总体的真实值;,(,3,)有效性,,即它是否在所有线性无偏估计量中具有最小方差。,19,11/11/2024,(,4,)渐近无偏性,,即样本容量趋于无穷大时,是否它的均值序列趋于总体真值;,(,5,)一致性,,即样本容量趋于无穷大时,它是否依概率收敛于总体的真值;,(,6,)渐近有效性,,即样本容量趋于无穷大时,是否它在所有的一致估计量中具有最小的渐近方差。,这三个准则也称作估计量的,小样本性质。,拥有这类性质的估计量称为,最佳线性无偏估计量,(,best liner unbiased estimator,BLUE,)。,当不满足小样本性质时,需进一步考察估计量的,大样本,或,渐近性质,:,20,11/11/2024,高斯,马尔可夫定理,(Gauss-Markov theorem),在给定经典线性回归的假定下,最小二乘估计量是具有最小方差的线性无偏估计量。,21,11/11/2024,证:,易知,故,同样地,容易得出,22,11/11/2024,23,11/11/2024,(,2,)证明最小方差性,其中,,c,i,=,k,i,+,d,i,,,d,i,为不全为零的常数,则容易证明,普通最小二乘估计量,(,ordinary least Squares Estimators,)称为,最佳线性无偏估计量,(,best linear unbiased estimator,BLUE,),24,11/11/2024,由于最小二乘估计量拥有一个,“,好,”,的估计量所应具备的小样本特性,它自然也拥有大样本特性,。,25,11/11/2024,五、参数估计量的概率分布及随机干扰项方差的估计,26,11/11/2024,27,11/11/2024,2,、随机误差项,的方差,2,的估计,由于随机项,i,不可观测,只能从,i,的估计,残差,e,i,出发,对总体方差进行估计。,2,又称为,总体方差,。,可以证明,,,2,的,最小二乘估计量,为,它是关于,2,的无偏估计量。,28,11/11/2024,在,最大或然估计法,中,,因此,,2,的最大或然估计量不具无偏性,但却具有一致性,。,29,11/11/2024,30,11/11/2024,
展开阅读全文
相关资源
正为您匹配相似的精品文档
相关搜索

最新文档


当前位置:首页 > 图纸设计 > 开题报告


copyright@ 2023-2025  zhuangpeitu.com 装配图网版权所有   联系电话:18123376007

备案号:ICP2024067431-1 川公网安备51140202000466号


本站为文档C2C交易模式,即用户上传的文档直接被用户下载,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有。装配图网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。若文档所含内容侵犯了您的版权或隐私,请立即通知装配图网,我们立即给予删除!