浅析预测分析注定失败的思考方式
虽说预测分析是一项很得人心的技术,每个人都希望能通过使用预测分析方法和预测分析工具,从而可提前看到未知的结果,来避免失败,但如果没有做好准备,信手拈来的使用预测分析方法,那必将失败。无论对于预测分析是你新手菜鸟,还是已经进行了大量的预测分析项目,都非常容易犯错。
数据挖掘公司Elder Research的CEO John Elder说:“大量的分析项目中都充斥着各种各样的错误。”这些错误大都不是致命的,通过模型即改善,但是也一些项目是相当地失败,致使业务在软件在投资的大量的金钱和时间,但却没有任何收益。本文列出了预测分析注定失败的思考方式。
1.开始后没有假定结果
对于预测分析大家都很兴奋,你看到了它的潜在价值。但却有一个问题:你的心中没有一个特定的目标。
Elder
Research参与的一个大公司中就有这样的情况。该公司开始使用他们的数据进行预测一些事情,或所有的事情,即一个方管可以出去向他的业务单元销售。虽然研究机构同意与他合作,并为他量身定制了一个使用模型,但由于这个业务单元中没有一个人问题他将要销售什么,最后该项目就没有了方向。
教训:不要先做锤子,再找钉子。在开始之前,一定要有一个特定的目标。
2.在数据不支持的基础上定义项目
一个债务催收公司希望找出最有效的方法来促使欠债人员还债。挑战是:该公司已经有一套严格的规则了,而且在每一个案例中都遵循这套原则。
数据挖掘是一项对比的艺术。因为该公司有了一套成熟的原则并一直遵循着,所以他们并不知道哪一种结果更有利于回收债务。所以该公司需要一些历史性的例子。
如果你没有这些案例,那么就需要创建一系列的实验来收集数据了。例如,假设有欠债人有1,000人,500人收到的了恐吓信,而另外500人得到的是电话催债,这是第一步。然后,预测模型就可以进行预测,预测哪类欠债人会更好的对恐吓信进行反应,哪类会更好的对电话进行反应。
在些案例中,欠债人类型可能包括历史模式引发的债务、按天支付过去的债务、收入、邮政编码的住宅等等。基于预测模型,这一催债机构可能会更好的使用更有经济效益的策略,而不是对所有人使用同一策略。但你要从实验开始。无中生有,对于预测分析来说是不可能的。
3.在得到最好数据之前就不前行
人们常常误解下操作:他们必须使数据完美地组织,没有任何漏洞、障碍或缺失的价值,在这之后才会进行预测分析。
Elder Research的一个客户,一个跨国石化公司刚刚开始进行预测分析项目,期望有更大的投资回报率,但这时他们的数据科学家发现现有的运营数据比他们原本想象的还要糟糕。
在此案例中缺失了一个最关键的目标价值。在使业务等待收集新数据时,该项目可能会延迟至少一年的时间。大部分公司在这里停滞不前。与其它错误相比这一错误是项目的最在杀手。
4.评估数据质量时,不清除垃圾数据
一个财富1000的金融服务公司想预测哪个客服中心的员工将会工作的时间最长。乍一看,该公司的历史数据似乎表明没有高中文凭、在公司停留至少9个月的员工数据是其它教育背景的员工有2.6倍。咨询公司建议客户从优先招聘高中辍学生开始。
但这就出现了两个问题。首先从求职者的简历中手动键入的数据已经做了不一致的标记。一条数据检查所有教育层次的人们,另一个只检查完成了高水平教育的人。
另一个更加复杂的问题是:因为某些原因,在呆的时间最长的人的简单中所有的标记中,后者比前者多。通过确保所做的标记是随机键入的一组简历,而且每一个人都使用同一种标记法,就可以以免这些问题。
在这一案例中我们得到一个最的信息就是:“只有垃圾在,才会有垃圾清理。在确保数据质量之间一定要确保数据的完整性。”
5.从未来的数据中预测未来
伴随着数据仓库的一个问题是它们并不静止的:信息一直在变,一直在更新。但预测分析是一种归纳的学习过程,它依赖于对历史数据,或“训练数据”的分析来创建模型。所以你要重新数据在客户生命周期初始阶段的状态。如果数据没有标注日期和时间戳,这很容易就会引进产生错误结果导向的未来数据。
有一件发生在汽车俱乐部的事:该俱乐部着手建立一个模型,用于预测他们的哪类会员更有可能购买他们的保险产品。为了建模,该俱乐部需要重建他们之前数据集合,把会员购买和决定购买保险产品的时间优先级提前,而且还要包含进子数据。该组织建立了一个决策树,它包括一个含有电话、传真和邮件数据的文本变量。当这一变量中包含了任何文本,那么就可以百分之百确定这些会员不久后就购买这一保险。
该项目的一个负责人说我们确信这个指示器将会在会员购买保险之前进行提示,但汽车俱乐部的员工却不能告诉我们它意味着什么。提前知道简直令人难以置信,他继续提问直到找到组织中知道事实的人:该变量代表着会员是如何取消他们保险的——通过电话、传真或者邮件。他说你不买就没有取消一说
。所以当你进行建模时,你必须锁定一些你的数据。
总结:失败只是一个选择
看了这些事例,你可能会把预测分析想象的非常困难,但不要害怕。虽然你在预测分析的路上出现了很多错误,但同时你也在学习,在调整,这是值得的。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的需求持续飙升。世界经济论坛发布的《未来就业报告》, ...
2025-03-28你有没有遇到过这样的情况?流量进来了,转化率却不高,辛辛苦苦拉来的用户,最后大部分都悄无声息地离开了,这时候漏斗分析就非 ...
2025-03-27TensorFlow Datasets(TFDS)是一个用于下载、管理和预处理机器学习数据集的库。它提供了易于使用的API,允许用户从现有集合中 ...
2025-03-26"不谋全局者,不足谋一域。"在数据驱动的商业时代,战略级数据分析能力已成为职场核心竞争力。《CDA二级教材:商业策略数据分析 ...
2025-03-26当你在某宝刷到【猜你喜欢】时,当抖音精准推来你的梦中情猫时,当美团外卖弹窗刚好是你想吃的火锅店…… 恭喜你,你正在被用户 ...
2025-03-26当面试官问起随机森林时,他到底在考察什么? ""请解释随机森林的原理""——这是数据分析岗位面试中的经典问题。但你可能不知道 ...
2025-03-25在数字化浪潮席卷的当下,数据俨然成为企业的命脉,贯穿于业务运作的各个环节。从线上到线下,从平台的交易数据,到门店的运营 ...
2025-03-25在互联网和移动应用领域,DAU(日活跃用户数)是一个耳熟能详的指标。无论是产品经理、运营,还是数据分析师,DAU都是衡量产品 ...
2025-03-24ABtest做的好,产品优化效果差不了!可见ABtest在评估优化策略的效果方面地位还是很高的,那么如何在业务中应用ABtest? 结合企业 ...
2025-03-21在企业数据分析中,指标体系是至关重要的工具。不仅帮助企业统一数据标准、提升数据质量,还能为业务决策提供有力支持。本文将围 ...
2025-03-20解锁数据分析师高薪密码,CDA 脱产就业班助你逆袭! 在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的 ...
2025-03-19在 MySQL 数据库中,查询一张表但是不包含某个字段可以通过以下两种方法实现:使用 SELECT 子句以明确指定想要的字段,或者使 ...
2025-03-17在当今数字化时代,数据成为企业发展的关键驱动力,而用户画像作为数据分析的重要成果,改变了企业理解用户、开展业务的方式。无 ...
2025-03-172025年是智能体(AI Agent)的元年,大模型和智能体的发展比较迅猛。感觉年初的deepseek刚火没多久,这几天Manus又成为媒体头条 ...
2025-03-14以下的文章内容来源于柯家媛老师的专栏,如果您想阅读专栏《小白必备的数据思维课》,点击下方链接 https://edu.cda.cn/goods/sh ...
2025-03-13以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda.cn/go ...
2025-03-12以下的文章内容来源于柯家媛老师的专栏,如果您想阅读专栏《小白必备的数据思维课》,点击下方链接 https://edu.cda.cn/goods/sh ...
2025-03-11随着数字化转型的加速,企业积累了海量数据,如何从这些数据中挖掘有价值的信息,成为企业提升竞争力的关键。CDA认证考试体系应 ...
2025-03-10推荐学习书籍 《CDA一级教材》在线电子版正式上线CDA网校,为你提供系统、实用、前沿的学习资源,助你轻松迈入数据分析的大门! ...
2025-03-07在数据驱动决策的时代,掌握多样的数据分析方法,就如同拥有了开启宝藏的多把钥匙,能帮助我们从海量数据中挖掘出关键信息,本 ...
2025-03-06