首页 . 理学 . 化学 . 分析化学 . 化学计量学 . 分析化学信息化 . 最小二乘原理

加权最小二乘原理

/weighted least-squares principle/
条目作者吴海龙俞汝勤
条目作者吴海龙

吴海龙

俞汝勤

俞汝勤

最后更新 2023-06-01
浏览 333
最后更新 2023-06-01
浏览 333
0 意见反馈 条目引用

对原模型进行加权,使之成为一个新的不存在异方差性的模型,然后采用普通最小二乘法估计其参数的方法。最小二乘法可看作是加权最小二乘法的特例。

英文名称
weighted least-squares principle
所属学科
化学

已知原模型:

(1)

如果在检验过程中已经知道:

…(2)

即随机误差项的方差与解释变量之间存在相关性,模型存在异方差。那么可以用去除原模型,使之变成如下形式的新模型:

(3)

在该模型中,存在:

(4)

即同方差性。于是可以用普通最小二乘法估计其参数,得到关于参数的无偏的、有效的估计量。这就是加权最小二乘法,在这里权就是

一般情况下,对于模型:

…(5)

若存在:

…(6)

则原模型存在异方差性。设,其中:

, 

左乘(5)两边,得到一个新的模型:

…(7)

即:


该模型具有同方差性。因为:


于是,可以用普通最小二乘法估计模型(7),得到参数估计量为:

…(8)

这就是原模型(1)的加权最小二乘估计量,是无偏的、有效的估计量。

为了得到权矩阵,需要对原模型首先采用普通最小二乘法,得到随机误差项的近似估计量,以此构成权矩阵的估计量,即:

…(9)

当应用计量经济学软件包时,只要选择加权最小二乘法,将上述权矩阵输入,估计过程即告完成。这样,就引出了人们通常采用的经验方法,即并不对原模型进行异方差性检验,而是直接选择加权最小二乘法,尤其是采用截面数据作样本时。如果确实存在异方差性,则被有效地消除了;如果不存在异方差性,则加权最小二乘法等价于普通最小二乘法。

  • KENDALL M G, STUART A.Advanced Theory of Statistics. 3rd ed.London:High Wycombe,1969.
  • 魏木生.广义最小二乘问题的理论和计算.北京:科学出版社,2006.

相关条目

阅读历史

    意见反馈

    提 交

    感谢您的反馈

    我们会尽快处理您的反馈!
    您可以进入个人中心的反馈栏目查看反馈详情。
    谢谢!