多元统计分析-主成分分析ppt课件.ppt
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_05.gif)
《多元统计分析-主成分分析ppt课件.ppt》由会员分享,可在线阅读,更多相关《多元统计分析-主成分分析ppt课件.ppt(83页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。主成分分析的基本思想主成分分析的基本思想主成分的计算主成分的计算主成分的性质主成分的性质主成分分析的应用主成分分析的应用主成分回归主成分回归“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联
2、网应用为重点的“群众性治安防控工程”。 一项十分著名的工作是美国的统计学家斯通(stone)在1947年关于国民经济的研究。他曾利用美国1929一1938年各年的数据,得到了17个反映国民收入与支出的变量要素,例如雇主补贴、消费资料和生产资料、纯公共支出、净增库存、股息、利息外贸平衡等等。1 基本思想“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。 在进行主成分分析后,竟以97.4的精度,用三新变量就取代了原17个变量。根据经济学知识,斯通给这三个新变量分别命名为总收入总收入F
3、1、总收入总收入变化率变化率F2和经济发展趋势经济发展趋势F3。更有意思的是,这三个变量其实都是可以直接测量的。斯通将他得到的主成分与实际测量的总收入I、总收入变化率I以及时间t因素做相关分析,得到下表:“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。F1F1F2F2F3F3i ii it tF1F11 1F2F20 01 1F3F30 00 01 1i i0.9950.995-0.041-0.0410.0570.057l li i-0.056-0.0560.9480.948-
4、0.124-0.124-0.102-0.102l lt t-0.369-0.369-0.282-0.282-0.836-0.836-0.414-0.414-0.112-0.1121 1“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。主成分分析的基本思想 主成分分析就是把原有的多个指标转化成少数几个代表性较好的综合指标,这少数几个指标能够反映原来指标大部分的信息(85%以上),并且各个指标之间保持独立,避免出现重叠信息。主成分分析主要起着降维和简化数据结构的作用。“雪亮工程是以区
5、(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。 主成分分析是把各变量之间互相关联的复杂关系进行简化分析的方法。 在社会经济的研究中,为了全面系统的分析和研究问题,必须考虑许多经济指标,这些指标能从不同的侧面反映我们所研究的对象的特征,但在某种程度上存在信息的重叠,具有一定的相关性。 “雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。 主成分分析试图在力保数据信息丢失最少的原则下
6、,对这种多变量的截面数据表进行最佳综合简化,也就是说,对高维变量空间进行降维处理。 很显然,识辨系统在一个低维空间要比在一个高维空间容易得多。“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。2 数学模型与几何解释 假设我们所讨论的实际问题中,有p个指标,我们把这p个指标看作p个随机变量,记为X1,X2,Xp,主成分分析就是要把这p个指标的问题,转变为讨论 m 个新的指标F1,F2,Fm(mp),按照保留主要信息量的原则充分反映原指标的信息,并且相互独立。“雪亮工程是以区(县)、
7、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。npnnppXXXXXXXXXX212222111211niiiiXXXX21其中pXXX21“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。XXaXaXaFXXaXaXaFXXaXaXaFppppppppppp2211222221122112211111 这种由讨论多个指标降为少数几个综合指标的过程在数学上就叫做降维。主成分分析通常的做
8、法是,寻求原指标的线性组合Fi。“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。)()(121XVarkXkVar所以如果不对 加以限制,问题就变得无意义。1最大最大因此限制 为单位向量。1)()(1piiiXaVarXVarijjpjijiipiiiisaasa1,122piijjpjisaa11)(XVar“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。满足
9、如下的条件:122221piiiaaapjijiFFCovji,),(210)()(21pFVarFVarFVar)(主成分之间相互独立,即无重叠的信息。即主成分之间相互独立,即无重叠的信息。即主成分的方差依次递减,重要性依次递减,即主成分的方差依次递减,重要性依次递减,即每个主成分的系数平方和为每个主成分的系数平方和为1。即。即“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。2x1x1F2F主成分分析的几何解释平移、旋转坐标轴“雪亮工程是以区(县)、乡(镇)、村(社区)三级综
10、治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。2x1x1F2F主成分分析的几何解释平移、旋转坐标轴“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。2x1x1F2F 主成分分析的几何解释平移、旋转坐标轴“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。 旋转变换的目的是为了使得n个样品点在Fl轴方
11、向上的离散程度最大,即Fl的方差最大。变量Fl代表了原始数据的绝大 部分信息,在研究某经济问题时,即使不考虑变量F2也无损大局。经过上述旋转变换原始数据的大部分信息集中到Fl轴上,对数据中包含的信息起到了浓缩作用。“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。 Fl,F2除了可以对包含在Xl,X2中的信息起着浓缩作用之外,还具有不相关的性质,这就使得在研究复杂的问题时避免了信息重叠所带来的虚假性。二维平面上的n个点的方差大部分都归结在Fl轴上,而F2轴上的方差很小。Fl和F2
12、称为原始变量x1和x2的综合变量。F简化了系统结构,抓住了主要矛盾。 “雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。2x1x1F2F主成分分析的几何解释平移、旋转坐标轴“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。先讨论二维情形212122211211XXXXXXXXXnn求主成分F1和F2。“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台
13、、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。21,xx观察图,我们已经把主成分F1和F2 的坐标原点放在平均值 所在处,从而使得F1和F2 成为中心化的变量,即F1和F2 的样本均值都为零。“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。因此F1可以表示为)()(222111111xxaxxaF),(2111aa关键关键是,寻找合适的单位向量 ,使F1的方差最大。122111222211121112)(saasasaFVa
14、r2111222112112111)(aassssaa最大最大1问题的答案问题的答案是:X的协方差矩阵S 的最大特征根 所对应的单位特征向量即为 。并且 就是F1的方差。2111,aa1推导“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。同样,F2可以表示为)()(222211122xxaxxaF),(2212aa寻找合适的单位向量 ,使F2与F1独立,且使F2的方差(除F1之外)最大。2问题的答案问题的答案是:X的协方差矩阵S 的第二大特征根 所对应的单位特征向量即为 。并且
15、 就是F2的方差。2212,aa2推导“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。求解主成分的步骤:求解主成分的步骤:1. 求样本均值 和样本协方差矩阵S;),(21xxX 2. 求S的特征根求解特征方程 ,其中I是单位矩阵,解得2个特征根 0 IS2121,3. 求特征根所对应的单位特征向量4. 写出主成分的表达式“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工
16、程”。例1 下面是8 个学生两门课程的成绩表 6585709065455565数学10090707085555545语文1x2x对此进行主成分分析。1. 求样本均值和样本协方差矩阵求样本均值和样本协方差矩阵5 .6725.7121xxX5 .1871 .1034 .323S“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。IS2. 求解特征方程 0 05 .1871 .1031 .1034 .32301 .103)5 .187)(4 .323(2 化简得:09 .500079 .
17、5102 解得:132, 9 .37821 5 .1871 .1034 .323S“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。3.求特征值所对应的单位特征向量 1所对应的单位特征向量 , 0)(11S 其中21111aa0)9 .3785 .187(1 .10301 .103)9 .3784 .323(21112111aaaa1221211aa解得 (2111,aa)=)47. 0 ,88. 0( 2所对应的单位特征向量 0)(22S ,其中221220)1325 .187
18、(1 .10301 .103)1324 .323(22122212aaaa1222212aa解得: )88. 0 ,47. 0(),(2212aa5 .1871 .1034 .323S“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。4. 得到主成分的表达式 )5 .67(47. 0)25.71(88. 0211xxF第二主成分:)5 .67(88. 0)25.71(47. 0212xxF第一主成分:5.主成分的含义通过分析主成分的表达式中原变量前的系数来解释各主成分的含义。 第
19、一主成分F1是 和 的加权和,表示该生成绩的好坏。 1x2x第二主成分F2表示学生两科成绩的均衡性 “雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。6. 比较主成分重要性比较主成分重要性 第一主成分F1的方差为9 .3781第二主成分F2的方差为1322方差贡献率 )()()(211211FVarFVarFVar%16.741329 .3789 .378%84.251329 .378132212方差贡献率为 主成分F1和F2的方差总和为219 .5101329 .378原变量和
20、1x2x的方差总和为9 .5105 .1874 .3232211 ss总方差保持不变总方差保持不变“雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。身高x1(cm)胸围x2(cm)体重x3(kg)149.5162.5162.7162.2156.5156.1172.0173.2159.5157.769.577.078.587.574.574.576.581.574.579.038.555.550.865.549.045.551.059.543.553.5例2 下表是10位学生的身高
21、1x、胸围2x、体重3x的数据。对此进行主成分分析。 “雪亮工程是以区(县)、乡(镇)、村(社区)三级综治中心为指挥平台、以综治信息化为支撑、以网格化管理为基础、以公共安全视频监控联网应用为重点的“群众性治安防控工程”。1. 求样本均值和样本协方差矩阵 2 .513 .772 .161321xxx53.5558.3200.3011.2112.1767.46S 2. 求解协方差矩阵的特征方程 0 IS 053.5558.3200.3058.3211.2112.1700.3012.1767.463.解得三个特征值 15.98160.23256. 13)71. 0 ,42. 0 ,56. 0(),(
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 多元 统计分析 成分 分析 ppt 课件
![提示](https://www.taowenge.com/images/bang_tan.gif)
限制150内