因子分析方法精品文稿.ppt
因子分析方法第1页,本讲稿共42页微积分1工程制图初步算法语言英语体育1军事理论中国革命史通论2体育2普通物理体育3当代资本主义普通物理实验1电路原理1工程数学数字电子技术基础体育4普通物理实验2工程基础体育5电机与电力拖动基础模拟电子基础计算机原理及应用1电子技术课程设计体育6自动控制理论1金工实习马克思主义哲学基础1软件技术基础运筹学1自动控制原理2马克思主义哲学基础2工程经济与管理计算机原理及应用2信号与系统分析中国特色社会主义建设概论过程检测及仪表计算机控制系统生产实习人工智能导论计算机仿真4.1、因子分析的主要目的例:大学课程训练了哪些公共能力?第2页,本讲稿共42页样本数据:个同学的考试成绩种公共能力,考试成绩可分解成公共因子特殊因子因子载荷有可能从因子载荷分析公共能力的含义若有第3页,本讲稿共42页记基本目的:载荷矩阵特殊因子公共因子载荷向量前面的分解可以写成根据矩阵分析的含义第4页,本讲稿共42页例:某年某市高考成绩的一个因子模型第5页,本讲稿共42页必须满足一些合理性条件为了使分析结果有意义,分解4.2、因子模型满足这些条件的分解称为-因子模型第6页,本讲稿共42页样本数据规格化消除变量单位的影响第7页,本讲稿共42页公共因子规格化使因子载荷相对大小有意义由此可知第8页,本讲稿共42页因子之间(包括特殊因子)样本向量彼此正交其中等价于规格变量的样本协方差为0保证因子之间线性无关第9页,本讲稿共42页并证明存在满足前面所列条件的-因子模型就是要确定一个建立使得第10页,本讲稿共42页矩阵表示满足-因子模型第11页,本讲稿共42页因为其中-因子模型的载荷矩阵如果所以是某个第12页,本讲稿共42页满足为对角矩阵,只要选择反之,如果存在,使并取-因子模型的所有条件均满足-因子模型的载荷矩阵是某个第13页,本讲稿共42页只需验证由已知条件可得第14页,本讲稿共42页个变量个方程个方程个方程个方程一共一般远大于应该有解第15页,本讲稿共42页-因子模型本质上就是把建立其中是对角矩阵样本相关矩阵分解成第16页,本讲稿共42页理论上可以转化为求解优化问题其中只有最优目标值为0时,才存在完全满足要求的因子模型第17页,本讲稿共42页4.3、有关概念因为所以共性变差个性变差公共因子的变差总贡献第18页,本讲稿共42页因为所以因子载荷反映变量对公共因子的相关性第19页,本讲稿共42页因子得分建立因子模型并不需要确定因子值如果需要,可以对其估计因为求解可得因子得分?第20页,本讲稿共42页例88个学生开卷考代数、分析、统计闭卷考力学,几何考试成绩的因子模型第21页,本讲稿共42页三个学生的成绩因子得分第22页,本讲稿共42页4.4、基于主成分的因子分析主成分分析中使用的符号第个主成分为第23页,本讲稿共42页所以因为第24页,本讲稿共42页令所有因子样本均值为0?能够满足公共因子样本方差为1?不能满足可得能否满足因子模型的所有条件?第25页,本讲稿共42页令于是第26页,本讲稿共42页能够满足公共因子之间样本向量彼此正交?因为所以第27页,本讲稿共42页公共因子与特殊因子样本向量彼此正交?能够满足因为所以第28页,本讲稿共42页特殊因子之间样本向量彼此正交?一般情况不能满足因为所以第29页,本讲稿共42页由于所以的影响,利用前如果前-因子模型个主成分的逼近误差很小都会很小,此时可忽略所有的它们对个主成分建立近似的第30页,本讲稿共42页是因子模型的载荷矩阵如果就有对角矩阵把样本相关矩阵分解成4.5、因子正交旋转此时对任何正交矩阵说明也是载荷矩阵如何利用?第31页,本讲稿共42页某年某市高考成绩的两个载荷矩阵第32页,本讲稿共42页选择恰当的正交矩阵对载荷矩阵进行分量的绝对值差异越大越便于解释列变换可能便于解释公共因子的含义的方差!基本准则:极大化第33页,本讲稿共42页用问题:共性变差此时存在差异代替消除差异其中的方差第34页,本讲稿共42页正交旋转优化问题其中第35页,本讲稿共42页轮换迭代算法首先取满足正交矩阵的约束第36页,本讲稿共42页相当于其余为常数向量原优化问题可以转化为一维无约束问题第37页,本讲稿共42页由可得其中第38页,本讲稿共42页再根据最大目标函数处应该有可得到确定最优解的规则第39页,本讲稿共42页然后取得到最优的替换后,先用再求解如此继续如此继续第40页,本讲稿共42页一次循环后目标函数增量不大就停止停止准则计算完全部(共有种组合)为一次循环第41页,本讲稿共42页例第42页,本讲稿共42页