资深大数据专家???
最近朋友圈里许多的人在为公司招"资深大数据"的人才,不禁思考,什么样的人才是资深的大数据专家?也许这个题目有点大,那就再落地一点,什么样的人才能帮我的公司带入到大数据的领域,并为我的公司盈利?
技术角度
先从技术角度来说,资深大数据专家首先要有相关的代码能力,要能够搭建Hadoop,Spark,Yarn这样的架构,要知道在这样的架构里要用什么语言来满足自己的业务发展。
然后又要懂得数据挖掘及数据可视化,同时,也要掌握前端的所有技术(LVS,CDN,负载均衡....)及相应的语言选择,有人说,大数据时代,要对R,Python,Scala都可以知道并明白它们的常用函数及相关的语法格式。
同时,你也要对相关的算法有一定的了解,经常用到的有决策树,Apriori,K-NN,K-MEAN等等的算法,当你开始使用这些算法的时候,一定要了解它的原理。这样,至少在你后期的算法优化的过程帮助你提高你的效能。
好了,从上面的三个角度来说。看一看我们身边是否有这样的人。答案显而易见,没有!又或者有,都是在BAT这样的大公司,一个新兴的小公司如何去招到这样资深的大数据人才,很难!因为,在你懂得Hadoop之后,业务要有较快的反应,此时你又要考虑Spark,随着实时性的发展,你势必又要学习Storm.这一方面的人才不可能技术非常专一,相反,他的技术感知,或者说相应的学习能力才更为重要!
所以,从技术角度来说,资深大数据人才,不仅仅是一项技术很好,而是一个技术综合能力及学习能力很强的人。
业务角度
最近听了两个论坛,一个是IBM的,一个是R语言大会。感触非常深,IBM在大数据领域可谓是引领了概念与潮流。上来他的本专业博士就说到,现在国内的大数据公司70%以上都跟大数据没什么关系!这是现实,我自己所从事的行来所从事的数据分析也仅限于TXT,EXCEL这类的原文本分析,非结构化的数据在传统行业很少。
大数据做的最好的行业可能就是广告行业,打开手机,你的朋友圈,PC,PAD。至少广告是会随着你的平台而至死追随你的。而广告,金融,医疗这三个行业,为什么大数据会最先落地,不是因为他们这个行业技术成熟度高或是什么,更为重要的可能就是这三个行业比较有钱吧!这是在R语言大会上李舰(至于说他是谁,相信用R做过文本分析的人可能知道,是写RWordseg包的那位)说的。
如何去理解你的业务,这一点可能是摆在大数据人才面前最为重要的问题。你的技术再强,算法再精确,没有对业务的详细了解是不可能做出很有成效的结果。有人又说到,大数据是互联网行业,我们对传统行业又不了解,而且也没有积累,如何能够快速掌握了解一个行业,进而对相关的数据有一个更深入的了解。
在这里,我个人比较欣赏猎头的做法,当你想了解一个行业的时候,你不是去看书,而是去招人!我相信,在与人沟通的过程中,你会了解到更多的信息。混论坛也是一个比较好的选择,因为在论坛上,你能够看到这个行业的方方面面。对你了解业务尤其重要。
培训业务思维,还有一个最简单的办法就是多和你们公司的销售聊聊!
综上所述,我所理解的资深大数据人才,重点还是在于对业务的理解,说的落地一点就是对你所采集下来的TXT,EXCEL数据里关键的几个指标的把控。你要知道某一个指标数过大或过小意味着什么?如何让这些指标为你产生价值跟利益!然后才是相关技术的学习,技术这一块,个人建议多懂一些,当要用时,再深化细节里边的内容。
举一个例子,为什么在人才市场里,算法工程师要比代码工程师价格高,因为搞算法的人必须要会代码,同时要能明白算法的内在逻辑。这一点是在自己学习过程中才体会到的,当你逻辑清楚之会的代码实现就相对简单一些了。
架构,这一点对资深大数据工程师来说,是必须要有的能力。要能够对传统行业搭建起最好的架构并能够运行,同时也要兼顾到后期的可扩展。还有一点,就是你要跟你的领导讲明白。
业务能力,落地一点就是能够什么时侯收回成本并实现盈利!记得我的数据挖掘老师说过,对于传统行业做数据分析与挖掘,你要能够在3-6的时间里让客户见到效益。否则你的数据挖掘就没有意义!
好了,以上就是我所理解的资深大数据的概念。希望在大数据这个风口,自己能够少点浮躁,多点踏实,把技术学好,把业务理解透彻。谦卑着努力,加油!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
“最近复购率一直在下降,我们的营销力度不小啊,为什么用户还是走了?” “是不是广告投放的用户质量不高?还是我们的产品问题 ...
2025-02-21以下文章来源于数有道 ,作者数据星爷 SQL查询是数据分析工作的基础,也是CDA数据分析师一级的核心考点,人工智能时代,AI能为 ...
2025-02-19在当今这个数据驱动的时代,几乎每一个业务决策都离不开对数据的深入分析。而其中,指标波动归因分析更是至关重要的一环。无论是 ...
2025-02-18当数据开始说谎:那些年我们交过的学费 你有没有经历过这样的场景?熬了三个通宵做的数据分析报告,在会议上被老板一句"这数据靠 ...
2025-02-17数据分析作为一门跨学科领域,融合了统计学、编程、业务理解和可视化技术。无论是初学者还是有一定经验的从业者,系统化的学习路 ...
2025-02-17挖掘用户价值本质是让企业从‘赚今天的钱’升级为‘赚未来的钱’,同时让用户从‘被推销’变为‘被满足’。询问deepseek关于挖 ...
2025-02-17近来deepseek爆火,看看deepseek能否帮我们快速实现数据看板实时更新。 可以看出这对不知道怎么动手的小白来说是相当友好的, ...
2025-02-14一秒精通 Deepseek,不用找教程,不用买资料,更不用报一堆垃圾课程,所有这么去做的,都是舍近求远,因为你忽略了 deepseek 的 ...
2025-02-12自学 Python 的关键在于高效规划 + 实践驱动。以下是一份适合零基础快速入门的自学路径,结合资源推荐和实用技巧: 一、快速入 ...
2025-02-12“我们的利润率上升了,但销售额却没变,这是为什么?” “某个业务的市场份额在下滑,到底是什么原因?” “公司整体业绩 ...
2025-02-08活动介绍 为了助力大家在数据分析领域不断精进技能,我们特别举办本期打卡活动。在这里,你可以充分利用碎片化时间在线学习,让 ...
2025-02-071、闺女,醒醒,媒人把相亲的带来了。 我。。。。。。。 2、前年春节相亲相了40个, 去年春节相亲50个, 祖宗,今年你想相多少个 ...
2025-02-06在数据科学的广阔领域中,统计分析与数据挖掘占据了重要位置。尽管它们常常被视为有关联的领域,但两者在理论基础、目标、方法及 ...
2025-02-05在数据分析的世界里,“对比”是一种简单且有效的方法。这就像两个女孩子穿同一款式的衣服,效果不一样。 很多人都听过“货比三 ...
2025-02-05当我们只有非常少量的已标记数据,同时有大量未标记数据点时,可以使用半监督学习算法来处理。在sklearn中,基于图算法的半监督 ...
2025-02-05考虑一种棘手的情况:训练数据中大部分样本没有标签。此时,我们可以考虑使用半监督学习方法来处理。半监督学习能够利用这些额 ...
2025-02-04一、数学函数 1、取整 =INT(数字) 2、求余数 =MOD(除数,被除数) 3、四舍五入 =ROUND(数字,保留小数位数) 4、取绝对值 =AB ...
2025-02-03作者:CDA持证人 余治国 一般各平台出薪资报告,都会哀嚎遍野。举个例子,去年某招聘平台发布《中国女性职场现状调查报告》, ...
2025-02-02真正的数据分析大神是什么样的呢?有人认为他们能轻松驾驭各种分析工具,能够从海量数据中找到潜在关联,或者一眼识别报告中的数 ...
2025-02-01现今社会,“转行”似乎成无数职场人无法回避的话题。但行业就像座围城:外行人看光鲜,内行人看心酸。数据分析这个行业,近几年 ...
2025-01-31