§3.6 受约束回归 在建立回归模型时,有时根据经济理论需对模型中变量的参数施加一定的约束条件。 1阶齐次性 条件的C-D生产函数

Slides:



Advertisements
Similar presentations
一、 一阶线性微分方程及其解法 二、 一阶线性微分方程的简单应用 三、 小结及作业 §6.2 一阶线性微分方程.
Advertisements

第五节 函数的微分 一、微分的定义 二、微分的几何意义 三、基本初等函数的微分公式与微分运算 法则 四、微分形式不变性 五、微分在近似计算中的应用 六、小结.
2.8 函数的微分 1 微分的定义 2 微分的几何意义 3 微分公式与微分运算法则 4 微分在近似计算中的应用.
2.6 隐函数微分法 第二章 第二章 二、高阶导数 一、隐式定义的函数 三、可微函数的有理幂. 一、隐函数的导数 若由方程 可确定 y 是 x 的函数, 由 表示的函数, 称为显函数. 例如, 可确定显函数 可确定 y 是 x 的函数, 但此隐函数不能显化. 函数为隐函数. 则称此 隐函数求导方法.
2.5 函数的微分 一、问题的提出 二、微分的定义 三、可微的条件 四、微分的几何意义 五、微分的求法 六、小结.
阻塞操作. 在 linux 里,一个等待队列由一个 wait_queue_head_t 类型的结构来描述 等待队列的初始化: static wait_queue_head_t testqueue; init_waitqueue_head(&testqueue);
非线性时间序列模型 一般非线性时间序列模型介绍 条件异方差模型 上海财经大学 统计与管理学院.
3.2.平稳性检验的单位根方法 单位根检验方法 DF检验 ADF检验 PP检验 KPSS检验 ERS检验 NP检验.
第三章 经典单方程计量经济学模型:多元线性回归模型
第三章 异方差和自相关.
第十章 相关与回归分析 PowerPoint 统计学.
第五章 二次型. 第五章 二次型 知识点1---二次型及其矩阵表示 二次型的基本概念 1. 线性变换与合同矩阵 2.
一、能线性化的多元非线性回归 二、多元多项式回归(线性化)
一、二阶行列式的引入 用消元法解二元线性方程组. 一、二阶行列式的引入 用消元法解二元线性方程组.
第三章 函数逼近 — 最佳平方逼近.
多元回归分析:推断 y = b0 + b1x1 + b2x bkxk + u 计量经济学导论 刘愿.
完全随机设计多样本资料秩和检验.
什么是计量经济学? 计量经济学(Econometrics),又译成经济计量学,是1926年挪威经济学家R. Frish仿照生物计量学(Biometrics)一词首先提出来的,它的提出标志着计量经济学的诞生。 但是,人们一般认为,1930年12月29日世界计量经济学会成立和由它创办的学术刊物Econometrica于1933年正式出版,才标志着计量经济学作为一个独立的学科正式诞生了。
第一章 行列式 第五节 Cramer定理 设含有n 个未知量的n个方程构成的线性方程组为 (Ⅰ) 由未知数的系数组成的n阶行列式
§3.5 回归模型的其他函数形式 一、模型的类型与变换 二、非线性回归实例.
第二章 经典单方程计量经济学模型: 一元线性回归模型
量化视角下的豆粕投资机会分析 格林期货研发培训中心 郭坤龙.
第5章 定积分及其应用 基本要求 5.1 定积分的概念与性质 5.2 微积分基本公式 5.3 定积分的换元积分法与分部积分法
第三节 格林公式及其应用(2) 一、曲线积分与路径无关的定义 二、曲线积分与路径无关的条件 三、二元函数的全微分的求积 四、小结.
§5 微分及其应用 一、微分的概念 实例:正方形金属薄片受热后面积的改变量..
§5 微分及其应用 一、微分的概念 实例:正方形金属薄片受热后面积的改变量..
计量经济学 第三章 多元线性回归模型.
第2章 Z变换 Z变换的定义与收敛域 Z反变换 系统的稳定性和H(z) 系统函数.
§3.3 多元线性回归模型的统计检验 一、拟合优度检验 二、方程的显著性检验(F检验) 三、变量的显著性检验(t检验) 四、参数的置信区间.
计量经济学 第三章 多元线性回归模型.
第二章 回归模型 法、参数的普通最小二乘估计式及相关性质、对模型的经济意 义检验和统计检验,能应用Eviews软件进行最小二乘估计与统
一元线性回归模型 § 1 回归分析概述 § 2 一元线性回归模型的参数估计 § 3 一元线性回归模型的统计检验
二、Dickey-Fuller检验(DF检验)
第2章 一元线性回归 2 .1 一元线性回归模型 2 .2 参数 的估计 2 .3 最小二乘估计的性质 2 .4 回归方程的显著性检验
计算机数学基础 主讲老师: 邓辉文.
§2 求导法则 2.1 求导数的四则运算法则 下面分三部分加以证明, 并同时给出相应的推论和例题 .
第十章 方差分析.
第七章 参数估计 7.3 参数的区间估计.
第4章 非线性规划 4.5 约束最优化方法 2019/4/6 山东大学 软件学院.
习题 一、概率论 1.已知随机事件A,B,C满足 在下列三种情况下,计算 (1)A,B,C相互独立 (2)A,B独立,A,C互不相容
抽样和抽样分布 基本计算 Sampling & Sampling distribution
6.4不等式的解法举例(1) 2019年4月17日星期三.
多元回归分析:异方差性 y = b0 + b1x1 + b2x bkxk + u 计量经济学导论 刘愿.
模型分类问题 Presented by 刘婷婷 苏琬琳.
概 率 统 计 主讲教师 叶宏 山东大学数学院.
线 性 代 数 厦门大学线性代数教学组 2019年4月24日6时8分 / 45.
第五章 异方差.
定理21.9(可满足性定理)设A是P(Y)的协调子集,则存在P(Y)的解释域U和项解释,使得赋值函数v(A){1}。
第16讲 相似矩阵与方阵的对角化 主要内容: 1.相似矩阵 2. 方阵的对角化.
相关与回归 非确定关系 在宏观上存在关系,但并未精确到可以用函数关系来表达。青少年身高与年龄,体重与体表面积 非确定关系:
第4课时 绝对值.
第四章 多元线性回归分析.
学习任务三 偏导数 结合一元函数的导数学习二元函数的偏导数是非常有用的. 要求了解二元函数的偏导数的定义, 掌握二元函数偏导数的计算.
第一部分:概率 产生随机样本:对分布采样 均匀分布 其他分布 伪随机数 很多统计软件包中都有此工具 如在Matlab中:rand
建模常见问题MATLAB求解  .
第15讲 特征值与特征向量的性质 主要内容:特征值与特征向量的性质.
§5.2 抽样分布   确定统计量的分布——抽样分布,是数理统计的基本问题之一.采用求随机向量的函数的分布的方法可得到抽样分布.由于样本容量一般不止2或 3(甚至还可能是随机的),故计算往往很复杂,有时还需要特殊技巧或特殊工具.   由于正态总体是最常见的总体,故本节介绍的几个抽样分布均对正态总体而言.
2019/5/21 实验一 离散傅立叶变换的性质及应用 实验报告上传到“作业提交”。 11:21:44.
概率论与数理统计B.
正弦、余弦函数的性质 华容一中 伍立华 2017年2月24日.
§2 方阵的特征值与特征向量.
第三节 随机区组设计的方差分析 随机区组设计资料的总平方和可以分解为三项: (10.10).
在发明中学习 线性代数概念引入 之四: 矩阵运算 李尚志 中国科学技术大学.
滤波减速器的体积优化 仵凡 Advanced Design Group.
第三节 函数的微分 3.1 微分的概念 3.2 微分的计算 3.3 微分的应用.
多元线性回归分析.
《偏微分方程》第一章 绪论 第一章 绪论 1.1.
§4.5 最大公因式的矩阵求法( Ⅱ ).
第三章 线性方程组 §4 n维向量及其线性相关性(续7)
一元一次方程的解法(-).
Presentation transcript:

§3.6 受约束回归 在建立回归模型时,有时根据经济理论需对模型中变量的参数施加一定的约束条件。 1阶齐次性 条件的C-D生产函数 如: 0阶齐次性 条件的消费需求函数 1阶齐次性 条件的C-D生产函数 模型施加约束条件后进行回归,称为受约束回归(restricted regression); 不加任何约束的回归称为无约束回归(unrestricted regression)。

受约束回归 一、模型参数的线性约束 二、对回归模型增加或减少解释变量 三、参数的稳定性 *四、非线性约束

一、模型参数的线性约束 对模型 (*) 施加约束 得 或 (**) 如果对(**)式回归得出 则由约束条件可得:

需进一步进行相应的检验。常用的检验有: F检验、x2检验与t检验, 主要介绍F检验 在同一样本下,记无约束样本回归模型为 然而,对所考查的具体问题能否施加约束? 需进一步进行相应的检验。常用的检验有: F检验、x2检验与t检验, 主要介绍F检验 在同一样本下,记无约束样本回归模型为 受约束样本回归模型为 于是

e’e为无约束样本回归模型的残差平方和RSSU 受约束样本回归模型的残差平方和RSSR 于是 (*) e’e为无约束样本回归模型的残差平方和RSSU 受约束与无约束模型都有相同的TSS 由(*)式 RSSR  RSSU 从而 ESSR  ESSU 这意味着,通常情况下,对模型施加约束条件会降低模型的解释能力。

但是,如果约束条件为真,则受约束回归模型与无约束回归模型具有相同的解释能力,RSSR 与 RSSU的差异变小。 根据数理统计学的知识: 于是:

讨论: 如果约束条件无效, RSSR 与 RSSU的差异较大,计算的F值也较大。 于是,可用计算的F统计量的值与所给定的显著性水平下的临界值作比较,对约束条件的真实性进行检验。 注意,kU - kR恰为约束条件的个数。

例3.6.1 中国城镇居民对食品的人均消费需求实例中,对零阶齐次性检验: 无约束回归:RSSU=0.00324, kU=3 受约束回归:RSSR=0.00332, KR=2 样本容量n=14, 约束条件个数kU - kR=3-2=1 取=5%,查得临界值F0.05(1,10)=4.96 判断:不能拒绝中国城镇居民对食品的人均消费需求函数具有零阶齐次特性这一假设。

这里的F检验适合所有关于参数线性约束的检验 H0: j=0 j=1,2,…,k 这里:受约束回归模型为 这里,运用了ESSR =0。

二、对回归模型增加或减少解释变量 考虑如下两个回归模型 (*)式可看成是(**)式的受约束回归: (*) (**) H0: 相应的F统计量为:

如果约束条件为真,即额外的变量Xk+1, …, Xk+q对Y没有解释能力,则F统计量较小; 讨论: 如果约束条件为真,即额外的变量Xk+1, …, Xk+q对Y没有解释能力,则F统计量较小; 否则,约束条件为假,意味着额外的变量对Y有较强的解释能力,则F统计量较大。 因此,可通过F的计算值与临界值的比较,来判断额外变量是否应包括在模型中。 F统计量的另一个等价式

三、参数的稳定性 建立模型时往往希望模型的参数是稳定的,即所谓的结构不变,这将提高模型的预测与分析功能。如何检验? 假设需要建立的模型为 1、邹氏参数稳定性检验 假设需要建立的模型为 在两个连续的时间序列(1,2,…,n1)与(n1+1,…,n1+n2)中,相应的模型分别为:

如果=,表示没有发生结构变化,因此可针对如下假设进行检验: H0: = (*)式施加上述约束后变换为受约束回归模型 合并两个时间序列为( 1,2,…,n1 ,n1+1,…,n1+n2 ),则可写出如下无约束回归模型 (*) 如果=,表示没有发生结构变化,因此可针对如下假设进行检验: H0: = (*)式施加上述约束后变换为受约束回归模型 (**)

因此,检验的F统计量为: 记RSS1与RSS2为在两时间段上分别回归后所得的残差平方和,容易验证, 于是

该检验也被称为邹氏参数稳定性检验(Chow test for parameter stability)。 参数稳定性的检验步骤: (1)分别以两连续时间序列作为两个样本进行回归,得到相应的残差平方: RSS1与RSS2 (2)将两序列并为一个大样本后进行回归,得到大样本下的残差平方和RSSR (3)计算F统计量的值,与临界值比较: 若F值大于临界值,则拒绝原假设,认为发生了结构变化,参数是非稳定的。 该检验也被称为邹氏参数稳定性检验(Chow test for parameter stability)。

2、邹氏预测检验 上述参数稳定性检验要求n2>k。 如果出现n2<k ,则往往进行如下的邹氏预测检验(Chow test for predictive failure)。 邹氏预测检验的基本思想: 先用前一时间段n1个样本估计原模型,再用估计出的参数进行后一时间段n2个样本的预测。 如果预测误差较大,则说明参数发生了变化,否则说明参数是稳定的。

分别以、 表示第一与第二时间段的参数,则 (*) 其中, 如果 =0,则  = ,表明参数在估计期与预测期相同 (*)的矩阵式: (**) 可见,用前n1个样本估计可得前k个参数的估计,而不外是用后n2个样本测算的预测误差X2( - )

如果参数没有发生变化,则=0,矩阵式简化为 (***) (***)式与(**)式 分别可看成受约束与无约束回归模型,于是有如下F检验: 这里:KU - KR=n2 RSSU=RSS1

第二步,对前一时间段的n1个子样做OLS回归,得残差平方和RSS1 ; 邹氏预测检验步骤: 第一步,在两时间段的合成大样本下做OLS回归,得受约束模型的残差平方和RSSR ; 第二步,对前一时间段的n1个子样做OLS回归,得残差平方和RSS1 ; 第三步,计算检验的F统计量,做出判断: 给定显著性水平,查F分布表,得临界值F(n2, n1-k-1) 如果 F>F(n2, n1-k-1) ,则拒绝原假设,认为预测期发生了结构变化。

例3.6.2 中国城镇居民食品人均消费需求的邹氏检验。 例3.6.2 中国城镇居民食品人均消费需求的邹氏检验。 1、参数稳定性检验 1981~1994: RSS1=0.003240 1995~2001: (9.96) (7.14) (-5.13) (1.81) 1981~2001: (14.83) (27.26) (-3.24) (-11.17)

给定=5%,查表得临界值F0.05(4, 13)=3.18 判断:F值>临界值,拒绝参数稳定的原假设,表明中国城镇居民食品人均消费需求在1994年前后发生了显著变化。 2、邹氏预测检验 给定=5%,查表得临界值F0.05(7, 10)=3.18 判断: F值>临界值,拒绝参数稳定的原假设

*四、非线性约束 也可对模型参数施加非线性约束,如对模型 施加非线性约束12=1,得到受约束回归模型: 该模型必需采用非线性最小二乘法(nonlinear least squares)进行估计。 非线性约束检验是建立在最大似然原理基础上的,有最大似然比检验、沃尔德检验与拉格朗日乘数检验.

1、最大似然比检验 (likelihood ratio test, LR) 估计:无约束回归模型与受约束回归模型, 方法:最大似然法, 检验:两个似然函数的值的差异是否“足够”大。 记L(,2)为一似然函数: 无约束回归 : Max: 受约束回归 : Max: 约束:g()=0 或求极值: g():以各约束条件为元素的列向量, ’:以相应拉格朗日乘数为元素的行向量

受约束的函数值不会超过无约束的函数值,但如果约束条件为真,则两个函数值就非常“接近”。 由此,定义似然比(likelihood ratio): 如果比值很小,说明两似然函数值差距较大,则应拒绝约束条件为真的假设; 如果比值接近于1,说明两似然函数值很接近,应接受约束条件为真的假设。 具体检验时,由于大样本下: h是约束条件的个数。因此: 通过LR统计量的2分布特性来进行判断。

判断: LR< 20.05(1),不拒绝原约束的假设, 表明:中国城镇居民对食品的人均消费需求函数满足零阶齐次性条件。 在中国城镇居民人均食品消费需求例中,对零阶齐次性的检验: LR= -2(38.57-38.73)=0.32 给出=5%、查得临界值20.05(1)=3.84, 判断: LR< 20.05(1),不拒绝原约束的假设, 表明:中国城镇居民对食品的人均消费需求函数满足零阶齐次性条件。

2、沃尔德检验(Wald test, W) 沃尔德检验中,只须估计无约束模型。如对 在所有古典假设都成立的条件下,容易证明 因此,在1+2=1的约束条件下

记 可建立沃尔德统计量: 如果有h个约束条件,可得到h个统计量z1,z2,…,zh 约束条件为真时,可建立大样本下的服从自由度为h的渐近2 分布统计量 其中,Z为以zi为元素的列向量,C是Z的方差-协方差矩阵。 因此,W从总体上测量了无约束回归不满足约束条件的程度。 对非线性约束,沃尔德统计量W的算法描述要复杂得多。

3、拉格朗日乘数检验 受约束回归是求最大似然法的极值问题: ’是拉格朗日乘数行向量,衡量各约束条件对最大似然函数值的影响程度。 拉格朗日乘数检验则只需估计受约束模型. 受约束回归是求最大似然法的极值问题: ’是拉格朗日乘数行向量,衡量各约束条件对最大似然函数值的影响程度。 如果某一约束为真,则该约束条件对最大似然函数值的影响很小,于是,相应的拉格朗日乘数的值应接近于零。 因此,拉格朗日乘数检验就是检验某些拉格朗日乘数的值是否“足够大”,如果“足够大”,则拒绝约束条件为真的假设。

拉格朗日统计量LM本身是一个关于拉格朗日乘数的复杂的函数,在各约束条件为真的情况下,服从一自由度恰为约束条件个数的渐近2分布。 (*) n为样本容量,R2为如下被称为辅助回归(auxiliary regression)的可决系数: 如果约束是非线性的,辅助回归方程的估计比较复杂,但仍可按(*)式计算LM统计量的值。 最后,一般地有:LMLRW