1.主成分分析的具体方法
主成分分析是一类常用的针对连续变量的降维方法,选取能够最大化解释数据变异的成分,将数据从高维降到低维,同时 保证各个维度之间正交。 对变量的协方差矩阵或相关系数矩阵求取特征值和特征向量,经证明,对应最大特征值的特征向量,其方向正是协方差矩 阵变异最大的方向。依次类推,第二大特征值对应的特征向量,是与第一个特征向量正交且能最大程度解释数据剩余变异 的方向,而每个特征值则能够衡量各方向上变异的程度。因此,进行主成分分析时,选取最大的几个特征值对应的特征向 量,并将数据映射在这几个特征向量组成的参考系中,达到降维的目的(选择的特征向量数量低于原始数据的维数)。
1.主成分分析算法解析
主成分分析算法认为,数据的信息是包含在其方差当中的,如果一个随机变量的方差很小,说明其不确定性较低,或者说即便我们没有获 得这个变量的抽样值,也几乎可以用一个确定的值(例如其期望值)来代替它,因此引入它只能消除很少的不确定性,即该变量包含的信 息较少。相反,一个方差很大的变量,如果能够获得它的抽样值,则可以帮助我们消除很大一部分不确定性,因此它包含的信息较多。 从主成分分析的观点出发,我们就知道下图中投影到哪个轴更加合适了,显然将原始坐标轴旋转到左图当中的U1位置更好,因为数据在 这个方向上的变异(方差)更大,而样本在右图的U1方向显然变异更小(图中阴影用于示意离散程度,并不代表方差大小)。
我们的目标是优化上式,求满足该函数最大化的 u,可以使用拉格朗日乘数法,即求满足下式最大的 u:
我们的目标是优化上式,求满足该函数最大化的 u,可以使用拉格朗日乘数法,即求满足下式最大的 u:
在实际研究中,有时单个指标的方差对研究目的起关键作用,为了达到研究目的,此时用协方差矩阵进行主成分分析恰 到好处。相关系数矩阵就是随机变量标准化后的协方差矩阵。通过随机变量的标准化,相关系数矩阵剥离了单个指标的 方差,仅保留指标间的相关性,用相关系数矩阵计算主成分,其优势效应仅体现在相关性大、相关指标数多的一类指标上。
2.主成分法的应用
大致分为三个方面:
(1)对数据做综合打分
(2)降维以便对数据进行描述
(3)为聚类或回归等分析提供变量压缩 在应用时要能够判断主成分法的适用性,能够根据需求选取合适的主成分数量。
1.主成分分析计算在选择相关系数计算法时,确定主成分个数的大致原则包括( )?
A.特征根值大于1
B. 特征根值大于0.5
答案:AC 解析:主成分分析主要考核得到软件的计算结果后如何选择主成分个数,由于主成分一般不具有 明确的意义,因此不考核主成分的解释,这会放在因子分析考核。该题是一个很标准的题目,答 案可以从任何一本教科书上找到。请注意题干中的“大致原则”,说明该原则在不同的运用场合 下选择标准会略有改变
2.主成分分析计算分为根据相关系数和协方差矩阵两种方式,以下哪种情况适合用相关系数计算( )?
A.变量的量纲不同
B. 变量的方差不同
C. 变量的标准差不同
D. 变量的均值不同
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据科学的广阔领域中,统计分析与数据挖掘占据了重要位置。尽管它们常常被视为有关联的领域,但两者在理论基础、目标、方法及 ...
2025-02-05在数据分析的世界里,“对比”是一种简单且有效的方法。这就像两个女孩子穿同一款式的衣服,效果不一样。 很多人都听过“货比三 ...
2025-02-05当我们只有非常少量的已标记数据,同时有大量未标记数据点时,可以使用半监督学习算法来处理。在sklearn中,基于图算法的半监督 ...
2025-02-05考虑一种棘手的情况:训练数据中大部分样本没有标签。此时,我们可以考虑使用半监督学习方法来处理。半监督学习能够利用这些额 ...
2025-02-04一、数学函数 1、取整 =INT(数字) 2、求余数 =MOD(除数,被除数) 3、四舍五入 =ROUND(数字,保留小数位数) 4、取绝对值 =AB ...
2025-02-03作者:CDA持证人 余治国 一般各平台出薪资报告,都会哀嚎遍野。举个例子,去年某招聘平台发布《中国女性职场现状调查报告》, ...
2025-02-02真正的数据分析大神是什么样的呢?有人认为他们能轻松驾驭各种分析工具,能够从海量数据中找到潜在关联,或者一眼识别报告中的数 ...
2025-02-01现今社会,“转行”似乎成无数职场人无法回避的话题。但行业就像座围城:外行人看光鲜,内行人看心酸。数据分析这个行业,近几年 ...
2025-01-31本人基本情况: 学校及专业:厦门大学经济学院应用统计 实习经历:快手数据分析、字节数据分析、百度数据分析 Offer情况:北京 ...
2025-01-3001专家简介 徐杨老师,CDA数据科学研究院教研副总监,主要负责CDA认证项目以及机器学习/人工智能类课程的研发与授课,负责过中 ...
2025-01-29持证人简介 郭畅,CDA数据分析师二级持证人,安徽大学毕业,目前就职于徽商银行总行大数据部,两年工作经验,主要参与两项跨部 ...
2025-01-282025年刚开启,知乎上就出现了一个热帖: 2024年突然出现的经济下行,使各行各业都感觉到压力山大。有人说,大环境越来越不好了 ...
2025-01-27在数据分析的世界里,“对比”是一种简单且有效的方法。这就像两个女孩子穿同一款式的衣服,效果不一样。 很多人都听过“货比三 ...
2025-01-26数据指标体系 “数据为王”相信大家都听说过。当前,数据信息不再仅仅是传递的媒介,它成为了驱动经济发展的新燃料。对于企业而 ...
2025-01-26在职场中,当你遇到问题的时候,如果感到无从下手,或者抓不到重点,可能是因为你掌握的思维模型不够多。 一个好用的思维模型, ...
2025-01-25俗话说的好“文不如表,表不如图”,图的信息传达效率很高,是数据汇报、数据展示的重要手段。好的数据展示不仅需要有图,还要选 ...
2025-01-24数据分析报告至关重要 一份高质量的数据分析报告不仅能够揭示数据背后的真相,还能为企业决策者提供有价值的洞察和建议。 年薪70 ...
2025-01-24又到一年年终时,各位打工人也迎来了展示成果的关键时刻 —— 年终述职。一份出色的年终述职报告,不仅能全面呈现你的工作价值, ...
2025-01-23“用户旅程分析”概念 用户旅程图又叫做用户体验地图,它是用于描述用户在与产品或服务互动的过程中所经历的各个阶段、触点和情 ...
2025-01-22在竞争激烈的商业世界中,竞品分析对于企业的发展至关重要。今天,我们就来详细聊聊数据分析师写竞品分析的那些事儿。 一、明确 ...
2025-01-22