好久没写文章了,本人目前从事BI行业,主要做BO(报表展示)这一块,写这一篇文章主要是想分享一下自己的心得。本人不是大牛,基础小白,所以下面你会看到的更多是不经润色(不经大脑)的心得体会,而不是一堆NB轰轰的专业名称,算法,建模思想,分析思路等技术分享型文章。更多的是对这个职业的看法,技术上的问题相信度娘比我更加专业!
欢迎吐槽指正!
说到数据分析一定要讲BI
商业智能(BI,BusinessIntelligence)。
BI(BusinessIntelligence)即商务智能,它是一套完整的解决方案,用来将企业中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助企业做出明智的业务经营决策。
广义的BI是包括很多方面的内容,包括数据处理—》数据存储—》数据仓库—》(数据挖掘)—》BO展示层
BI是智能化的数据分析,说白了就是很多手工的工作我们让电脑帮我们做了,省去大量复杂繁琐的人工,这就是智能。比如日报,周报,月报这些报表我们统一用工具定时自己跑出来!
要说的有3点:
1、目前大部分企业的BI是不包括数据挖掘的,实际上很多人也不是很清楚这个流程,一般只是认为BI就是做报表的。恩,对,就是做报表的(BO展示层)。
2、一般小企业的数据分析岗位,很多只是简单粗暴的DB+Excel,所以你会发现,**,工资好低!
3、DB+Excel是基于小企业数据分析量不大才能这么做的,未来数据暴增下,一个注重数据分析的企业势必会走势智能化这条路,毕竟人工也是成本啊~
数据分析与数据挖掘
/**以下是百度百科解释**/
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。这一过程也是质量管理体系的支持过程。在实用中,数据分析可帮助人们作出判断,以便采取适当行动。
数据挖掘(英语:Datamining),又译为资料探勘、数据采矿。它是数据库知识发现(英语:Knowledge-DiscoveryinDatabases,简称:KDD)中的一个步骤。数据挖掘一般是指从大量的数据中通过算法搜索隐藏于其中信息的过程。数据挖掘通常与计算机科学有关,并通过统计、在线分析处理、情报检索、机器学习、专家系统(依靠过去的经验法则)和模式识别等诸多方法来实现上述目标。
数据分析和数据挖掘很多人没有分清,数据分析其实也是包括数据挖掘的,不过现在大部分企业细分岗位,一般数据分析和数据挖掘是两个不同的岗位!
以下我所讲的数据分析都是基于目前企业数据分析岗位而言(狭义上的数据分析,做报表的~)
数据分析主要是描述性统计分析,出报表,属于BO层面。工具有IBMcognos、SAPBO、oracleBIEE、MicrosoftSSRS、MicroStrategy、Smartbi、QlikView、Power-BI等~太多了,基本功能都相似,就是做好OLAP数据集后通过可视化的操作开发出报表框架,再定时出报表!
数据挖掘主要用于海量数据挖掘、预测性分析,比如关联规则,分类、回归、聚类、离群点检测之类的算法,主要工具有SAS、SPSS、R&Python、MSDataMing等,SAS&SPSS可视化界面,操作简单,比较容易上手;R&Python需要自己编程,难度比较大,但是函数、算法都封装好了,可以直接拿来用。
数据挖掘主要是基于海量的数据,即大数据。现在感觉任何东西跟大数据挂钩,它就变得高大上了!基于这个数据量的前提,所以目前国内做数据挖掘的主要在金融(银行、保险、证券)、电信、广告等行业&BAT三大巨头!
说实在数据挖掘,算法,统计思想这些不是最重要的,最根本是业务知识!跟BO对比起来,数据挖掘更最要你对业务的理解,如果你对业务理解透彻了,很多东西甚至都不需要经算法建模,只需要画一个透视图、透视表你就会发现其中的规律(知识)了。
很多新手都会问到的一个问题是,入门需要什么技能?
一、对于数据分析而言,最重要的技能是SQL、SQL、SQL+BO工具(这个有些了解就可,毕竟使用简单)
SQL需要会到什么程度?企业日常用到的大部分是:80%(增删查改+连接查询+基本聚合函数+数据格式处理函数)+20%(其他函数使用),而你只要需要会增删查改+连接查询+基本聚合函数+数据格式处理函数这些基础功能即可,其他函数使用通过百度你能看懂能用就行,使用率比较低。
二、对于(DM)数据挖掘而言,建模大部分的工作还是花在了数据处理上,这个要看对应企业使用的工具,数据处理流程要懂!!+算法(建模)思想+统计学基础,业务知识都是在日常工作中积累的。SO,DM的入门基础就相对要高些,门槛也相对较高。
三、补充一点:对于数据分析和数据挖掘以及大数据相关的工作还有一个特别重要的岗位,就是数据库开发。不同于DBA,大部分BI&DM80%数据库开发的工作其实都是在倒腾数据,所以前期数据处理环节特别重要,衍生出专业的数据库开发,主要做ETL、数据迁移,建多维数据集、数据仓库,OLAP,universe,query之类的工作。对技术要求较高,属于底层工作人员,个人觉得特别重要!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
“最近复购率一直在下降,我们的营销力度不小啊,为什么用户还是走了?” “是不是广告投放的用户质量不高?还是我们的产品问题 ...
2025-02-21以下文章来源于数有道 ,作者数据星爷 SQL查询是数据分析工作的基础,也是CDA数据分析师一级的核心考点,人工智能时代,AI能为 ...
2025-02-19在当今这个数据驱动的时代,几乎每一个业务决策都离不开对数据的深入分析。而其中,指标波动归因分析更是至关重要的一环。无论是 ...
2025-02-18当数据开始说谎:那些年我们交过的学费 你有没有经历过这样的场景?熬了三个通宵做的数据分析报告,在会议上被老板一句"这数据靠 ...
2025-02-17数据分析作为一门跨学科领域,融合了统计学、编程、业务理解和可视化技术。无论是初学者还是有一定经验的从业者,系统化的学习路 ...
2025-02-17挖掘用户价值本质是让企业从‘赚今天的钱’升级为‘赚未来的钱’,同时让用户从‘被推销’变为‘被满足’。询问deepseek关于挖 ...
2025-02-17近来deepseek爆火,看看deepseek能否帮我们快速实现数据看板实时更新。 可以看出这对不知道怎么动手的小白来说是相当友好的, ...
2025-02-14一秒精通 Deepseek,不用找教程,不用买资料,更不用报一堆垃圾课程,所有这么去做的,都是舍近求远,因为你忽略了 deepseek 的 ...
2025-02-12自学 Python 的关键在于高效规划 + 实践驱动。以下是一份适合零基础快速入门的自学路径,结合资源推荐和实用技巧: 一、快速入 ...
2025-02-12“我们的利润率上升了,但销售额却没变,这是为什么?” “某个业务的市场份额在下滑,到底是什么原因?” “公司整体业绩 ...
2025-02-08活动介绍 为了助力大家在数据分析领域不断精进技能,我们特别举办本期打卡活动。在这里,你可以充分利用碎片化时间在线学习,让 ...
2025-02-071、闺女,醒醒,媒人把相亲的带来了。 我。。。。。。。 2、前年春节相亲相了40个, 去年春节相亲50个, 祖宗,今年你想相多少个 ...
2025-02-06在数据科学的广阔领域中,统计分析与数据挖掘占据了重要位置。尽管它们常常被视为有关联的领域,但两者在理论基础、目标、方法及 ...
2025-02-05在数据分析的世界里,“对比”是一种简单且有效的方法。这就像两个女孩子穿同一款式的衣服,效果不一样。 很多人都听过“货比三 ...
2025-02-05当我们只有非常少量的已标记数据,同时有大量未标记数据点时,可以使用半监督学习算法来处理。在sklearn中,基于图算法的半监督 ...
2025-02-05考虑一种棘手的情况:训练数据中大部分样本没有标签。此时,我们可以考虑使用半监督学习方法来处理。半监督学习能够利用这些额 ...
2025-02-04一、数学函数 1、取整 =INT(数字) 2、求余数 =MOD(除数,被除数) 3、四舍五入 =ROUND(数字,保留小数位数) 4、取绝对值 =AB ...
2025-02-03作者:CDA持证人 余治国 一般各平台出薪资报告,都会哀嚎遍野。举个例子,去年某招聘平台发布《中国女性职场现状调查报告》, ...
2025-02-02真正的数据分析大神是什么样的呢?有人认为他们能轻松驾驭各种分析工具,能够从海量数据中找到潜在关联,或者一眼识别报告中的数 ...
2025-02-01现今社会,“转行”似乎成无数职场人无法回避的话题。但行业就像座围城:外行人看光鲜,内行人看心酸。数据分析这个行业,近几年 ...
2025-01-31