《多元统计分析》课件-因子分析.ppt
- 【下载声明】
1. 本站全部试题类文档,若标题没写含答案,则无答案;标题注明含答案的文档,主观题也可能无答案。请谨慎下单,一旦售出,不予退换。
2. 本站全部PPT文档均不含视频和音频,PPT中出现的音频或视频标识(或文字)仅表示流程,实际无音频或视频文件。请谨慎下单,一旦售出,不予退换。
3. 本页资料《《多元统计分析》课件-因子分析.ppt》由用户(三亚风情)主动上传,其收益全归该用户。163文库仅提供信息存储空间,仅对该用户上传内容的表现方式做保护处理,对上传内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知163文库(点击联系客服),我们立即给予删除!
4. 请根据预览情况,自愿下载本文。本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
5. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007及以上版本和PDF阅读器,压缩文件请下载最新的WinRAR软件解压。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 多元统计分析 多元 统计分析 课件 因子分析
- 资源描述:
-
1、1因子分析因子分析2 1 1 引言引言 因子分析(factor analysis)是一种数据简化的技术。它通过研究众多变量之间的内部依赖关系,探求观测数据中的基本结构,并用少数几个假想变量来表示其基本的数据结构。这几个假想变量能够反映原来众多变量的主要信息。原始的变量是可观测的显在变量,而假想变量是不可观测的潜在变量,称为因子。 例如,在企业形象或品牌形象的研究中,消费者可以通过一个有24个指标构成的评价体系,评价百货商场的24个方面的优劣。3 但消费者主要关心的是三个方面,即商店的环境、商店的服务和商品的价格。因子分析方法可以通过24个变量,找出反映商店环境、商店服务水平和商品价格的三个潜在
2、的因子,对商店进行综合评价。而这三个公共因子可以表示为: iiiiiiFFFx33221124, 1i 称 是不可观测的潜在因子。24个变量共享这三个因子,但是每个变量又有自己的个性,不被包含的部分 ,称为特殊因子。321FFF、i4注:注: 因子分析与回归分析不同,因子分析中的因因子分析与回归分析不同,因子分析中的因子是一个比较抽象的概念,而回归因子有非常明子是一个比较抽象的概念,而回归因子有非常明确的实际意义;确的实际意义; 主成分分析分析与因子分析也有不同,主成主成分分析分析与因子分析也有不同,主成分分析仅仅是变量变换,而因子分析需要构造因分分析仅仅是变量变换,而因子分析需要构造因子模型
3、。子模型。 主成分分析主成分分析: :原始变量的线性组合表示新的原始变量的线性组合表示新的综合变量,即主成分;综合变量,即主成分; 因子分析:潜在的假想变量和随机影响变因子分析:潜在的假想变量和随机影响变量的线性组合表示原始变量。量的线性组合表示原始变量。5 2 因子分析模型因子分析模型 一、数学模型一、数学模型 设 个变量,如果表示为iX), 2 , 1(pip11iiiimmiXa Fa F)(pm 11111211122212222212mmpppppmpmXFXFXF或XAF或6 称为 公共因子,是不可观测的变量,他们的系数称为因子载荷。 是特殊因子,是不能被前m个公共因子包含的部分。
4、并且满足:mFFF,21iIFD111)(cov( , )0,F,F即不相关;mFFF,21即 互不相关,方差为1。722221)(pD即互不相关,方差不一定相等, 。), 0(2iiN8用矩阵的表达方式X- = AF+( )EF0( )E0( )VarFI22212( )(,)pVardiag1 11212 122212()()()()()()cov()()()()()ppppppE FE FE FE FE FE FEE FE FE FF,F09二、因子分析模型的性质 1、原始变量X的协方差矩阵的分解X- = AF+()( )( )VarVarVarX- = AF A+x = AA +DA是
5、因子模型的系数22212( )(,)pVardiagD D的主对角线上的元素值越小,则公共因子共享的成分越多。10 2、模型不受计量单位的影响 将原始变量X做变换X*=CX,这里Cdiag(c1,c2,cn),ci0。)C(X-) = C(AF+CXC+CAF+C*XC+CAF+C*X + A F +*FF11*()EF0*( )E0*()VarFI*2222221122( )(,)ppVardiag ccc* *cov()()EF ,F 012 3、因子载荷不是惟一的 设T为一个pp的正交矩阵,令A*=AT,F*=TF,则模型可以表示为*X+ A F +()ET F0( )E0*()()(
6、)VarVarVarFT FTF TI22212( )(,)pVardiag*cov()()EF ,F 0且满足条件因子模型的条件13 三、三、 因子载荷矩阵中的几个统计特征因子载荷矩阵中的几个统计特征 1 1、因子载荷、因子载荷a aijij的统计意义的统计意义 因子载荷 是第i个变量与第j个公共因子的相关系数 ija模型为 imimiiFaFaX11 在上式的左右两边乘以 jF,再求数学期望 )()()()()(11jijmimjjijjijiFEFFEaFFEFFEaFXE 根据公共因子的模型性质,有ijFxji (载荷矩阵中第i行,第j列的元素)反映了第i个变量与第j个公共因子的相关重
7、要性。绝对值越大,相关的密切程度越高。14 2 2、变量共同度的统计意义、变量共同度的统计意义定义:定义:变量 的共同度是因子载荷矩阵的第i行的元素的平方和。记为iX统计意义统计意义:imimiiFaFaX11两边求方差 )()()()(2112imimiiVarFVaraFVaraXVarmjiija1221 所有的公共因子和特殊因子对变量 的贡献为1。如果 非常靠近1, 非常小,则因子分析的效果好,从原变量空间到公共因子空间的转化性质好。iXmjija122imjija12。mjijiah12215 3 3、公共因子、公共因子 方差贡献的统计意义方差贡献的统计意义jF因子载荷矩阵中各列元素
8、的平方和 称为某一公共因子 对诸变量所提供的方差贡献和。衡量的相对重要性。piijjaS12jFjF16 3 3 因子载荷矩阵的估计方法因子载荷矩阵的估计方法 设随机向量 的均值为 ,协方差为 , 为的特征根, 为对应的标准化特征向量,则pxxx,21x021pp21u,u,u12p = UUAA +D主成分分析法主成分分析法17 上式给出的 表达式是精确的,然而,它实际上是毫无价值的,因为我们的目的是寻求用少数几个公共因子解释,故略去后面的p-m项的贡献,有21111mmmmmmp1122ppu uu uu uuuu up2uuuuuuppp21122111100p212ppuuuuuu18
9、 12 mmm1122AA +Du uu uu uD1121122 mmp mpmm p2uuuuuDAADu 上式有一个假定,模型中的特殊因子是不重要的,因而从 的分解中忽略了特殊因子的方差。22212(,)pdiagD其中221miiiijjsa19 例例 假定某地固定资产投资率 ,通货膨胀率 ,失业率 ,相关系数矩阵为试用主成分分析法求因子分析模型。1x2x3x15/25/15/215/15/15/1120 特征根为: 55. 11 85. 02 6 . 03 6 . 0707. 085. 0331. 055. 1629. 06 . 0707. 085. 0331. 055. 1629.
10、 0085. 0883. 055. 1475. 0A707. 0331. 0629. 0707. 0331. 0629. 00883. 0475. 0U548. 0305. 0783. 0548. 0305. 0783. 00814. 0569. 021 可取前两个因子F1和F2为公共因子,第一公因子F1物价就业因子,对X的贡献为1.55。第一公因子F2为投资因子,对X的贡献为0.85。共同度分别为1,0.706,0.706。211814. 0569. 0FFx3212548. 0305. 0783. 0FFFx3213548. 0305. 0783. 0FFFx22 4 因子旋转(正交变换)
11、 建立了因子分析数学目的不仅仅要找出公共因子以及对变量进行分组,更重要的要知道每个公共因子的意义,以便进行进一步的分析,如果每个公共因子的含义不清,则不便于进行实际背景的解释。由于因子载荷阵是不惟一的,所以应该对因子载荷阵进行旋转。目的是使因子载荷阵的结构简化,使载荷矩阵每列或行的元素平方值向0和1两极分化。有三种主要的正交旋转法。四次方最大法、方差最大法方差最大法和等量最大法。23 百米跑成绩 跳远成绩 铅球成绩 跳高成绩 400米跑成绩 百米跨栏 铁饼成绩 撑杆跳远成绩 标枪成绩 1500米跑成绩 1X2X3X4X5X6X7X8X9X10X奥运会十项全能运动项目奥运会十项全能运动项目得分数
12、据的因子分析得分数据的因子分析 24102. 017. 002. 001. 039. 018. 008. 009. 007. 0124. 034. 018. 013. 017. 044. 021. 011. 0124. 033. 023. 039. 024. 036. 020. 0132. 017. 027. 073. 031. 028. 0134. 046. 036. 052. 040. 0129. 019. 049. 063. 0138. 051. 034. 0142. 035. 0159. 0125变量共同度0.6910.217-0.58-0.2060.840.7890.184-0.19
13、30.0920.70.7020.5350.047-0.1750.80.6740.1340.1390.3960.650.620.551-0.084-0.4190.870.6870.042-0.1610.3450.620.621-0.5210.109-0.2340.720.5380.0870.4110.440.660.434-0.4390.372-0.2350.570.1470.5960.658-0.2790.891F2F3F4F1X2X3X4X5X6X7X8X9X10X 因子载荷矩阵可以看出,除第一因子在所有的变量在公共因子上有较大的正载荷,可以称为一般运动因子。其他的3个因子不太容易解释。似乎
14、是跑和投掷的能力对比,似乎是长跑耐力和短跑速度的对比。于是考虑旋转因子,得下表 2627 通过旋转,因子有了较为明确的含义。 百米跑, 400米跑,需要爆发力的项目在 有较大的载荷, 可以称 为短跑速度因子; 铅球, 铁饼和 标枪在 上有较大的载荷,可以称为爆发性臂力因子; 百米跨栏, 撑杆跳远, 跳远和为 跳高在 上有较大的载荷, 爆发腿力因子; 长跑耐力因子。5X1F1F3X7X9X2F6X8X2X4X3F3F4F1X28变换后因子的共同度变换后因子的共同度设 正交矩阵,做正交变换正交矩阵,做正交变换 AB )()(1mlljilppijabBmjmjmlljilijiabh111222)
15、()(B mjmlmjmlmljttjljitilljilaaa1 11 1 122)(2111222Aimlmjmlilljilhaa变换后因子的共同度没有发生变化!变换后因子的共同度没有发生变化!(二)旋转方法(二)旋转方法29变换后因子贡献变换后因子贡献设 正交矩阵,做正交变换正交矩阵,做正交变换 AB )()(1qlljilppijabBpipiqlljilijjabS111222)()(B piqlpiqlqltttjljitilljilaaa1111 122piqlqlljjljilSa1112222)(A变换后因子的贡献发生了变化变换后因子的贡献发生了变化!30 1、方差最大法
16、方差最大法从简化因子载荷矩阵的每一列出发,使和每个因子方差最大法从简化因子载荷矩阵的每一列出发,使和每个因子有关的载荷的平方的方差最大。当只有少数几个变量在某个因子有关的载荷的平方的方差最大。当只有少数几个变量在某个因子上又较高的载荷时,对因子的解释最简单。上又较高的载荷时,对因子的解释最简单。方差最大的直观意义是希望通过因子旋转后,使每个因子上的载荷尽量拉开距离,一部分的载荷趋于1,另一部分趋于0。2122211211ppaaaaaaA221122212122121111FaFaXFaFaXFaFaXppp31cossinsincosT设旋转矩阵为:cossinsincosAATB则coss
17、insincoscossinsincos112112111211ppppaaaaaaaa*2*1*12*11ppaaaa321,2, ;1,2ijijiadip jh令211(pjijiddp这是列和)max)()(1212 mjpijijddV简化准则为:00V令,则可以解出0000cossinsincosT旋转矩阵为:max(8.4.2)123m即:V +V +V+V33 5 因子得分因子得分 (一)因子得分的概念(一)因子得分的概念 前面我们主要解决了用公共因子的线性组合来表示一组观测变量的有关问题。如果我们要使用这些因子做其他的研究,比如把得到的因子作为自变量来做回归分析,对样本进行分
18、类或评价,这就需要我们对公共因子进行测度,即给出公共因子的值。34 人均要素变量因子分析人均要素变量因子分析。对我国32个省市自治区的要素状况作因子分析。指标体系中有如下指标:X1 :人口(万人) X2 :面积(万平方公里)X3 :GDP(亿元) X4 :人均水资源(立方米/人)X5:人均生物量(吨/人) X6:万人拥有的大学生数(人)X7:万人拥有科学家、工程师数(人) Rotated Factor Pattern FACTOR1 FACTOR2 FACTOR3 X1 -0.21522 -0.27397 0.89092 X2 0.63973 -0.28739 -0.28755 X3 -0.1
19、5791 0.06334 0.94855 X4 0.95898 -0.01501 -0.07556 X5 0.97224 -0.06778 -0.17535 X6 -0.11416 0.98328 -0.08300 X7 -0.11041 0.97851 -0.0724635 高载荷指标 因子命名 因子1X2;面积(万平方公里)X4:人均水资源(立方米/人)X5:人均生物量(吨/人)自然资源因子 因子2X6:万人拥有的大学生数(人)X7:万人拥有的科学家、工程师数(人) 人力资源因子 因子3 X1;人口(万人)X3:GDP(亿元)经济发展总量因子 X1=-0.21522F1-0.27397F2
20、+0.89092F3 X2=0.63973F1-0.28739F2-0.28755F3 X3=-0.15791F1+0.06334F2+0.94855F3 X4=0.95898F1-0.01501F2-0.07556F3 X5=0.97224F1-0.06778F2-0.17535F3 X6=-0.11416F1+0.98328F2-0.08300F3 X7=-0.11041F1+0.97851F2-0.07246F336 Standardized Scoring Coefficients FACTOR1 FACTOR2 FACTOR3 X1 0.05764 -0.06098 0.50391
21、X2 0.22724 -0.09901 -0.07713 X3 0.14635 0.12957 0.59715 X4 0.47920 0.11228 0.17062 X5 0.45583 0.07419 0.10129 X6 0.05416 0.48629 0.04099 X7 0.05790 0.48562 0.04822F1=0.05764X1+0.22724X2+0.14635X3+0.47920X4+0.45583X5+0.05416X6+0.05790X7F1=0.05764X1+0.22724X2+0.14635X3+0.47920X4+0.45583X5+0.05416X6+0.
22、05790X7F2=-0.06098X1-0.09901X2+0.12957X3+0.11228X4+0.07419X5+0.48629X6+0.48562X7F2=-0.06098X1-0.09901X2+0.12957X3+0.11228X4+0.07419X5+0.48629X6+0.48562X7F3=0.50391X1-0.07713X2+0.59715X3+0.17062X4+0.10129X5+0.04099X6+0.04822X7F3=0.50391X1-0.07713X2+0.59715X3+0.17062X4+0.10129X5+0.04099X6+0.04822X737R
23、EGION FACTOR1FACTOR2FACTOR3beijing-0.081694.23473-0.37983tianjin-0.474221.31789-0.87891hebei-0.22192-0.358020.86263shanxi1-0.48214-0.32643-0.54219neimeng0.54446-0.66668-0.92621liaoning-0.205110.463770.34087jilin-0.214990.10608-0.57431heilongj 0.10839-0.11717-0.02219shanghai-0.200692.38962-0.04259前三个
24、因子得分前三个因子得分38 因子分析的数学模型为: mpmppmmnFFFXXX2121222211121121 原变量被表示为公共因子的线性组合,当载荷矩阵旋转之后,公共因子可以做出解释,通常的情况下,我们还想反过来把公共因子表示为原变量的线性组合。 因子得分函数: pjpjjXXF11mj, 1可见,要求得每个因子的得分,必须求得分函数的系数,而由于pm,所以不能得到精确的得分,只能通过估计。39 回归方法 nmnmnnmmnFFFXXX212121222211121121pjpjjXbXbF11mj, 1mmpmmppbbbbbbbbbbbb212122221112111) 思想40)(
25、jiFxijFXEji)(11pjpjiXbXbXEipjpijbb11jpjjipiibbbrrr2121 则,我们有如下的方程组:41pjjjjpjjppppppaaabbb2121212222111211j=1,2,m矩阵为原始变量的相关系数pppppp21222211121142个因子得分函数的系数为第 jbbbjpjj21列为载荷矩阵的第 jaaapjjj21 注:共需要解注:共需要解m次才能解次才能解出出 所有的得分函数的系数。所有的得分函数的系数。43国民生活质量的因素分析 国家发展的最终目标,是为了全面提高全体国民的生活国家发展的最终目标,是为了全面提高全体国民的生活质量,满足
展开阅读全文