三个常用数据分析模型的典型应用场景
为啥是这三个模型呢?因为这三个模型分别代表了数据分析的三种思路:分类,聚类,降维。
为啥没有回归?回归我打算专门写一篇,因此在本文中暂不涉及。
为啥只说应用场景?因为具体模型有很多专业书籍讲的更好,而且我个人认为,模型是固定的,场景是多变的,知道什么时候该用什么模型,比会用这个模型更重要一些。
那么,接下来正文开始。
一、决策树
定义:机器学习中,决策树是一个预测模型;它代表的是对象属性与对象值之间的一种映射关系。
个人认为决策树最出名的应用应该是这个:
你们头脑里隐藏的任何念头,
都躲不过魔帽的金睛火眼,
戴上它试一下吧,我会告诉你们,
你们应该分到哪一所学院。
你也许属于格兰芬多,
那里有埋藏在心底的勇敢,
他们的胆识、气魄和豪爽,
使格兰芬多出类拔萃;
你也许属于赫奇帕奇,
那里的人正直 忠诚,
赫奇帕奇的学子们坚忍诚实,
不畏惧艰辛的劳动;
如果你头脑精明,
或许会进智慧的老拉文克劳,
那些睿智博学的人,
总会在那里遇见他们的同道;
也许你会进斯莱特林,
也许你在这里交上真诚的朋友,
但那些狡诈 阴险之辈却会不惜一切手段,
去达到他们的目的。
分院帽应用的是个非常典型的决策树模型(什么鬼),在上文的《分院帽之歌(节选)》中,我标粗的每个部分都可以认为是一个特征,帽子往学生头上一扣,读取学生的显著特征,然后分到某个类别里。所以你看,哈利波特一开始表现出来的特征都是格兰芬多的特征,但他毕竟是个魂器,分院帽读取数据时候发现这个人有两类显著特征,于是犹豫不决,最后还是波特自己提出了要求,这就证明应用模型时的人工干预必不可少(大雾)。
言归正传,决策树在实际工作中基本应用于给人群分类,最好的应用场景是要把人群分为互斥的两类,并找到两类人群的不同特征。当然,分为多个互斥类别也OK。
一个非常典型的场景是流失模型,对电信业来说,通过用户的行为来提前找到哪些人有流失风险,并通过专门优惠等手段挽留,是运营中的重要部分。之前我在转入互联网行业时,第一选择本来是游戏公司(可惜愿意收的给不起合理工资……),因此研究了一下游戏用户流失模型的内容,发现跟电信业有相通之处。举个例子,对于某款端游,定义超过一周不登录用户为流失,那么做过的任务、拿到的装备、打过的副本、充值金额等等,都可以作为预测用特征,比对流失与非流失用户,找到两者的区别,在关键流失节点上加一些运营策略来减少流失。
二、k-means聚类
定义:k-means聚类的目的是:把n个点(可以是样本的一次观察或一个实例)划分到k个聚类中,使得每个点都属于离他最近的均值(此即聚类中心)对应的聚类,以之作为聚类的标准。
K-means聚类的好处在于样本量大的时候,可以快速分群,但需要在分群后注意每个群体的可解释性。换句话说,给你一万个人,分成四群,需要能够解释每一群人的突出特征,如果有两群人的特征很相似,那就要重新分群了;或者有一群人的特征不明显,那就要增加分群了。
聚类与分类不同,分类的目的是得到可复用的规则,使得训练集以外的个体可以直接分到已知的类别里;聚类属于后验的研究,是对已有个体的辨别。当然聚类可以在一定条件下转化为分类,例如K-means里知道了每类的中心,那么新个体可以依据和每类中心的距离,来判断所属类别。但通常情况下,聚类方法本身仍是用于研究的次数更多。
K-means常用的场景是在不清楚用户有几类时,尝试性的将用户进行分类,并根据每类用户的不同特征,决定下步动作。一个典型的应用场景是CRM管理中的数据库营销。举例,对于一个超市/电商网站/综合零售商,可以根据用户的购买行为,将其分为“年轻白领”、“一家三口”、“家有一老”、”初得子女“等等类型,然后通过邮件、短信、推送通知等,向其发起不同的优惠活动。
明尼苏达州一家塔吉特门店被客户投诉,一位中年男子指控塔吉特将婴儿产品优惠券寄给他的女儿——一个高中生。但没多久他却来电道歉,因为女儿经他逼问后坦承自己真的怀孕了。塔吉特百货就是靠着分析用户所有的购物数据,然后通过相关关系分析得出事情的真实状况。
这个案例也算是与”啤酒和尿布“知名度差不多的一个案例。在这个案例中,那个高中生少女明显是被聚到了孕妇那一类,因为她的行为模式与孕妇是很相近的。
(决策树也可以做这件事,但需要先定义出特征,因此在探索特征未知的领域时,聚类可能更好用一些)
顺便说一句,我原先在国企的时候干的就是这个事,而且发送渠道是最土的那种……平信……术语叫数据库商函……也叫直复营销(不是直销也不是传销!)。
三、因子分析
定义:因子分析是指研究从变量群中提取共性因子的统计技术。因子分析可在许多变量中找出隐藏的具有代表性的因子。将相同本质的变量归入一个因子,可减少变量的数目,还可检验变量间关系的假设。
之前说到因子分析是降维的一种方式,而降维归根结底就是一句话:变量太多的时候,需要将变量重构成带有更多信息的新变量,新变量与原始变量之间存在相关性,这样才能在不损失太多原始信息的情况下减少变量数量。
因子分析的一个典型应用场景是满意度调查。通过市场调研方式获取消费者满意度时,通常会有两位数的问题来了解消费者对哪些方面满意,哪些方面不满意,这个时候因子分析就很重要,可以将消费者的问题归结为相对较少的几个大问题方向,同时也可以看出哪些问题更为重要,需要优先解决。cda数据分析师培训
数据分析咨询请扫描二维码
在准备数据分析师面试时,掌握高频考题及其解答是应对面试的关键。为了帮助大家轻松上岸,以下是10个高频考题及其详细解析,外加 ...
2024-12-20互联网数据分析师是一个热门且综合性的职业,他们通过数据挖掘和分析,为企业的业务决策和运营优化提供强有力的支持。尤其在如今 ...
2024-12-20在现代商业环境中,数据分析师是不可或缺的角色。他们的工作不仅仅是对数据进行深入分析,更是协助企业从复杂的数据信息中提炼出 ...
2024-12-20随着大数据时代的到来,数据驱动的决策方式开始受到越来越多企业的青睐。近年来,数据分析在人力资源管理中正在扮演着至关重要的 ...
2024-12-20在数据分析的世界里,表面上的技术操作只是“入门票”,而真正的高手则需要打破一些“看不见的墙”。这些“隐形天花板”限制了数 ...
2024-12-19在数据分析领域,尽管行业前景广阔、岗位需求旺盛,但实际的工作难度却远超很多人的想象。很多新手初入数据分析岗位时,常常被各 ...
2024-12-19入门数据分析,许多人都会感到“难”,但这“难”究竟难在哪儿?对于新手而言,往往不是技术不行,而是思维方式、业务理解和实践 ...
2024-12-19在如今的行业动荡背景下,数据分析师的职业前景虽然面临一些挑战,但也充满了许多新的机会。随着技术的不断发展和多领域需求的提 ...
2024-12-19在信息爆炸的时代,数据分析师如同探险家,在浩瀚的数据海洋中寻觅有价值的宝藏。这不仅需要技术上的过硬实力,还需要一种艺术家 ...
2024-12-19在当今信息化社会,大数据已成为各行各业不可或缺的宝贵资源。大数据专业应运而生,旨在培养具备扎实理论基础和实践能力,能够应 ...
2024-12-19阿里P8、P9失业都找不到工作?是我们孤陋寡闻还是世界真的已经“癫”成这样了? 案例一:本硕都是 985,所学的专业也是当红专业 ...
2024-12-19CDA持证人Louis CDA持证人基本情况 我大学是在一个二线城市的一所普通二本院校读的,专业是旅游管理,非计算机非统计学。毕业之 ...
2024-12-18最近,知乎上有个很火的话题:“一个人为何会陷入社会底层”? 有人说,这个世界上只有一个分水岭,就是“羊水”;还有人说,一 ...
2024-12-18在这个数据驱动的时代,数据分析师的技能需求快速增长。掌握适当的编程语言不仅能增强分析能力,还能帮助分析师从海量数据中提取 ...
2024-12-17在当今信息爆炸的时代,数据分析已经成为许多行业中不可或缺的一部分。想要在这个领域脱颖而出,除了热情和毅力外,你还需要掌握 ...
2024-12-17数据分析,是一项通过科学方法处理数据以获取洞察并支持决策的艺术。无论是在商业环境中提升业绩,还是在科研领域推动创新,数据 ...
2024-12-17在数据分析领域,图表是我们表达数据故事的重要工具。它们不仅让数据变得更加直观,也帮助我们更好地理解数据中的趋势和模式。相 ...
2024-12-16在当今社会,我们身处着一个飞速发展、变化迅猛的时代。不同行业在科技进步、市场需求和政策支持的推动下蓬勃发展,呈现出令人瞩 ...
2024-12-16在现代商业世界中,数据分析师扮演着至关重要的角色。他们通过解析海量数据,为企业战略决策提供有力支持。要有效完成这项任务, ...
2024-12-16在当今数据爆炸的时代,数据分析师是组织中不可或缺的导航者。他们通过从大量数据中提取可操作的洞察力,帮助企业在竞争激烈的市 ...
2024-12-16