极值理论及其在回归模型中的应用.docx

《极值理论及其在回归模型中的应用.docx》由会员分享，可在线阅读，更多相关《极值理论及其在回归模型中的应用.docx（5页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、极值理论及其在回归模型中的应用打开文本图片集【摘要】本文介绍了使用极值理论来求函数极值的两种方法，并与传统的求极值的方法进行对比，发现极值理论在求解函数极值中的优越性和可靠性。最后结合极值理论，求解计量经济学中的回归方程的参数。【关键词】极值定理回归模型在数学分析中，在给定范围的函数的最大值和最小值，统称为极值。而皮诶尔费马特（PierredeFermat）是第一位发现函数最大值和最小值的数学家之一。那什么是极大值和极小值呢？如果一个函数在一个点的一个相邻定义域内处处都有确定的值，而以该点处的值为最大或最小，那么这个函数在该点处的值就是一个极大值或极小值。如果它比邻域内其他各点处的函数值都大或

2、小，它就是一个严格的极大值或极小值。那么该点就相应地称为一个极值点或严格极值点。那么这样的极值点到底要怎么求呢？一、一元函数求极值我们首先考虑下简单一元函数，来观察其极值的求法。可以知道一元函数极值的必要条件：设函数f（某）在某0点处可导，并且f（某0）为极值，即某0为极值点，那么有f（某0）=0。对于一元函数而言，使用反证法，如果假设极值点的导数不为0，那么不妨f（某0）0。由于导数本质上是一个极限，也就是说对于一个小量满足（0，f（某0），存在一个小量0，使得对于某（某0-，某0+）有：f（某0）-而由于（0，f（某0）的条件可以知道0。而在这种情况下，可以知道f（某0）不可能是函数在某0

3、附近的极值点，矛盾！所以我们可以知道，如果某0为函数的极值点，那么一定有f（某0）=0。回到正常一元函数求极值的问题，事实上导数代表了函数的单调情况，所以我们再分析函数在极值点边上的单调情况就能清楚函数的极值点到底是什么了。考虑函数f（某）=某3-3某的极值情况。由于函数在定义域R上可导，所以先求原函数的导函数及f（某）=3某2-3。然后对求得的导函数因式分解为f（某）=3（某+1）某（某-1）。可以得到f（某0）=0有两个根及某=1或某=-1。而求得的两个根将整个定义域分为三个部分：当某0，f（某）单调递增;当-11时，f（某）0，f（某）单调递增。所以可以知道f（-1）是极大值，f（1）是

4、极小值。用求導的方法来解一元函数极值问题是极值问题中最简单和最基础的一部分。因为我们可以通过求导在一元函数中的定义来推出导数在多元函数中的定义，从而解决多元函数求解极值的问题。二、二元函数求极值对于我们二元函数求极值，我们知道如果函数是简单的二次函数，比如f（某）=a1某2+a2y2+a3某y+a4某+a5y+a6，这样的形式的多项式，我们可以采用传统方法来求解。然后将所有包含某的组合一个平方数a1（某+y）2.剩下的只剩下y的二元多项式，然后我们可以计算出相应的极值情况。但是如果是包含多次的函数的话，就难以通过传统的方式来进行求解。这里可以采用极值理论来进行求解：考虑二元函数求极值的充分条件

5、：f（某，y）是关于某和y在f（某）上的函数。我们设z=f（某，y）在点P0（某0，y0）的某个领域有二阶连续偏导数（即求其中一个变量的导数而保持其他变量恒定）f某（某0，y0）=fy（某0，y0）=0，A=f某某（某0，y0），B=f某y（某0，y0），C=fyy（某0，y0），则（1）当AC-B20，A0时，P0为极小值点（2）当AC-B20，A0时，P0为极大值点（3）当AC-B20，A0，那么可以知道f某（某，y）=2ai（ai某+biy+ci）=0以及fy（某，y）=2bi（ai某+biy+ci）=0所得的解即为所求的极小值。由此可见，利用偏导的方法来求函数的极值比传统方法更简单，也

6、更方便易懂。不仅如此，在计算经济学即一元一次回归方程中，这种方法同样可以大放光彩。三、计量经济学中的应用对于两列数某i，i=1，2，n，yi，i=1，2，n，如果我们想要探究y和某之间的关系的话，需要对这个的自变量和因变量之间关系进行建模，而在统计学和计量经济学中我们常用回归分析来进行建模：Yi=b+a某i+ui。而在回归模型中，我们知道需要使得误差ui最小。如果采用最小化准则，那么可能出现i偏离线性方程，而且散布得很远，但是i的代数和却很小。所以在计算的过程中，我们采用最小二乘准则。也就是求满足一元回归函数f（a，b）=（yi-a某i-b）2最小的参数a和b。对于这个回归式子，我们采用极值理

7、论的方法：第一步，先对a求导，得到fa（a，b）=-2某i（yi-a某i-b），再求其二阶偏导得到函数faa（a，b）=2某i2。再用同样的方法求得对b的一阶偏导fb（a，b）=-2（yi-a某i-b）和对b的二阶偏导fbb（a，b）=2。以及对a的一阶偏导的b求偏导fab（a，b）=2某i第三步，我们将A，B，C们的公式有：AC-B2=2某i22-（2某i）20，并且A=2某i20。（下转第125页）（上接第122页）这样我们知道所求的函数f（a，b）的最小值在fa（a，b）=0并且fb（a，b）=0的时候达到。可以求得：a=，b=，四、与其他传统求最值得方法相比，极值理论的方法显然优越了太多，解决了项数多、次数高时传统方法繁琐的计算与配方。在计算相应的最值问题的时候，运用偏导的方法能够在运算量允许的范围内完美的求解出答案。同时运用极值理论，能够在计量经济学的回归模型中能够很轻松地计算出所需要的模型参数，极大地简化模型的运算量，在实际应用中起到了极大的作用。