数据分析-回归分析
回归分析是数据分析中最常用的模型之一,其实用性和普遍性很高,如下分别从线性回归、多元回归、逻辑回归三方面,通过实例分析讲解
解决三个问题
实例1:羽美想预测明天的冰茶销量
实例2:宫野想估算在一个新的地址开店的月销售额
实例3:羽美想推测一下明天的特供蛋糕卖出去的可能性
回归分析的基础流程分六步
羽美想预测明天的冰茶销量。羽美知道冰茶在天热的时候销量好。记录的店中冰茶的销售数据在下表,先画出散点图观察相关性,下图是明显的正相关
可以通过添加趋势线,勾选显示公式和R平方值,轻松就搞定回归方程和精度估计
也可以自己用公式来计算,先求x的平均,y的平均,Sxx,Syy,Syy,通用Se的对a,b的微分=0可以推导出a,b的计算公式
用公式计算R平方看看数据和方程的拟合程度,越接近1拟合程度越高
将上面的数据作为抽样数据,可以估算出总体的分布,用F分布检测总体回归系数,计算出的统计量的概率和0.05比较
对总体回归做估值,在置信度为95%时计算置信区间,计算温度在31度时的置信区间
在置信度为95%时候计算预测区间,计算温度在31度时的预测区间,预测区间的取值范围要比估值区间更宽一些
观察个体的标准化残差,当个体的标准化残差的绝对值大于3时,应该剔除后再进行回归分析
使用Durbin-Watson统计量评估序列自相关程度,如果值在2左右,说明不存在序列自相关
可用尝试多种形式的方程做回归,通过观察散点图判断拟合程度比较好的函数,选择回归后的R平方大的函数
多元回归
宫野想估算在一个新的地址开店的月销售额。宫野知道营业面积越大,距离车站越近,店铺的销售额就越大。各家门店的销售数据如下表,首先画出散点图观察相关性,通过Correl函数计算相关系数,一个是0.89,一个是-0.77都相关显著
用Linest函数计算回归系数,注意Linest计算出的系数是反序的,带入系数就有了回归方程,接下来计算Syy、Se,因为多元回归中R的计算会受到自变量个数的影响,就用修正自由度的R2公式
对总体回归检验回归系数和偏回归系数的检测统计量
其中用到的S11的求解过程,A的转置用“粘贴”的时候勾选“转置”,矩阵相乘法用MMult函数,矩阵求逆用MInverse函数,S11就是对角线上第一行第一列的元素
计算估值区间和预测区间,多元回归采用马氏距离避免欧式距离的量岗的问题
多元回归的自变量可以很多,可以对自变量进行组合,用修正自由度的R平方评估后选择最好的组合。
多元回归将分类变量拆分为n-1个变量来处理,比如:性别有男、女和其他,拆分为性别男,性别女二个变量,用1,表示是,0表示否。
羽美想推测一下明天的特供蛋糕卖出去的可能性。羽美的经验告诉她周三六日客户比较多,好像和温度也有点关系。特供蛋糕的销售数据如下表,首先画出气泡图观察相关性,用气泡是因为点有密集的堆叠,通过Countif辅助列算出气泡的大小,就可以画出气泡吐了,然后用Correl函数计数相关系数。
用规划求解完成逻辑回归系数的计算,因为探测计算中可能会超出销售预测的值过小,从而导致对数释然计算的溢出失败,需要调整销售预测函数=1/(1+EXP(-IF(G2>-700,G2,-700)))做最小值的溢出保护,同时要约束系数变量不为零--AND(NOT($B$24=0),NOT($C$24=0),NOT($D$24=0)),注明:--是转换成整数
下面计算R平方的,这里n1,n0分别是样本中卖出去的个数和没有卖出去的个数,逻辑回归中R平方是越小越显著,可以计算误判率,卖出和预测卖出的相关系数观察模型精确程度。
总体系数的检测,用x2的2自由度检测
检测偏回归系数,用x2的1自由度检测
预测今天是否可以卖出去,带入方程=0.44<0.5估计是卖部出去了
数据分析咨询请扫描二维码
CDA数据分析师认证:CDA认证分为三个等级:Level Ⅰ、Level Ⅱ和Level Ⅲ,每个等级的报考条件如下: Le ...
2024-11-14自学数据分析可能是一条充满挑战却又令人兴奋的道路。随着数据在现代社会中的重要性日益增长,掌握数据分析技能不仅能提升你的就 ...
2024-11-14数据分析相关职业选择 数据分析领域正在蓬勃发展,为各种专业背景的人才提供了丰富的职业机会。从初学者到有经验的专家,每个人 ...
2024-11-14数据挖掘与分析在金融行业的使用 在当今快速发展的金融行业中,数据挖掘与分析的应用愈发重要,成为驱动行业变革和提升竞争力的 ...
2024-11-14学习数据挖掘需要掌握哪些技能 数据挖掘是一个不断发展的领域,它结合了统计学、计算机科学和领域专业知识,旨在从数据中提取有 ...
2024-11-14统计学作为一门基于数据的学科,其广泛的应用领域和多样的职业选择,使得毕业生拥有丰厚的就业前景。无论是在政府还是企业,统计 ...
2024-11-14在当今高速发展的技术环境下,企业正在面临前所未有的机遇和挑战。数字化转型已成为企业保持竞争力和应对市场变化的必由之路。要 ...
2024-11-13爬虫技术在数据分析中扮演着至关重要的角色,其主要作用体现在以下几个方面: 数据收集:爬虫能够自动化地从互联网上抓取大量数 ...
2024-11-13在数据分析中,数据可视化是一种将复杂数据转化为图表、图形或其他可视形式的技术,旨在通过直观的方式帮助人们理解数据的含义与 ...
2024-11-13在现代银行业中,数字化用户行为分析已成为优化产品和服务、提升客户体验和提高业务效率的重要工具。通过全面的数据采集、深入的 ...
2024-11-13在这个数据飞速增长的时代,企业若想在竞争中占据优势,必须充分利用数据分析优化其营销策略。数据不仅有助于理解市场趋势,还可 ...
2024-11-13数据分析行业的就业趋势显示出多个积极的发展方向。随着大数据和人工智能技术的不断进步,数据分析在各行各业中的应用变得越来越 ...
2024-11-13市场数据分析是一门涉及多种技能和工具的学科,对企业在竞争激烈的市场中保持竞争力至关重要。通过数据分析,企业不仅可以了解当 ...
2024-11-13数据分析与数据挖掘是数据科学领域中两个关键的组成部分,它们各有独特的目标、方法和应用场景。尽管它们经常在实际应用中结合使 ...
2024-11-13在如今这个数据驱动的时代,数据分析能力已经成为许多行业的重要技能。无论是为工作需要,还是为了职业转型,掌握数据分析都能够 ...
2024-11-13在如今这个数据驱动的时代,数据分析能力已经成为许多行业的重要技能。无论是为工作需要,还是为了职业转型,掌握数据分析都能够 ...
2024-11-13作为一名业务分析师,你肩负着将业务需求转化为技术解决方案的重任。面试这一角色时,涉及的问题多种多样,涵盖技术技能、分析能 ...
2024-11-13自学数据分析可能看似一项艰巨的任务,尤其在开始时。但是,通过一些策略和方法,你可以系统地学习和掌握数据分析的相关知识和技 ...
2024-11-10Excel是数据分析领域中的一款强大工具,它凭借其灵活的功能和易用的界面,成为了许多数据分析师和从业者的首选。无论是简单的数 ...
2024-11-10在快速发展的商业环境中,数据分析能力已经成为许多行业的核心竞争力。无论是初学者还是经验丰富的专家,搭建一个有效的数据分析 ...
2024-11-10