大数据并不是越多越好 有很多局限_数据分析师
大数据本身是一种实实在在的技术,所以应该不是一种泡沫。但在应用方面,在市场普及过程中,让人们觉得无所不能,其实大数据还是有很多局限。
大数据应该关注的是,如何让数据有用;另一方面,数据是不是越多越好?因为大家觉得是大数据了,不应该把数据浪费掉。但实际上不管你的计算能力有多强,总有一个计算负担限度,首先计算的负担越大,产生有效结果的可能性就越小。现在大家都觉得算法可以解决这个问题,其实不行。
云计算的舞台既有IBM、亚马逊、BAT等巨头,也有身形轻巧的创业公司。
“以前我们害怕BAT这些巨头,就是怕被踩死。”1月26日,云计算创业公司Anchora的CEO鲁为民在接受21世纪经济报道记者专访时表示,目前云计算整个领域都是比较新的,包括一些大公司的商业模式也都在摸索之中。
作为云计算领域的一家创业公司,Anchora旗下的魔泊云(MoPaaS)提供云平台服务,即PaaS(平台即服务)。在2011年回国创业之前,鲁为民曾在美国做过一个云计算项目。即使现在他也经常返回硅谷,和朋友交流最新的云技术和行业动态,以便在国内尝试。
鲁为民并不否认曾经对巨头的顾虑,但他认为,目前这个行业越来越成熟,无论百度还是腾讯、阿里,听得最多的关键词都是“开放”,比如百度要开放数据,腾讯要开放服务,均是以一种开放的心态来和第三方合作。
“云服务被视为一个很好的模式,但目前还很难赚钱。”鲁为民表示,目前在技术层面,国内和国外相差无几,主要的差距还是在应用层面,“在中国,某种程度上技术是超前的,但应用跟不上,可能还需要十年时间才能完全匹配”。
承上启下的中间平台
《21世纪》:魔泊云(MoPaaS)的商业模式是什么?
鲁为民:经过市场分析,我们发现很多企业并不在意你是做云计算的哪一块儿,他们希望自己的业务可以尽快部署好,所以MoPaaS的定义是基于IaaS(互联网即服务)之上、SaaS(软件即服务)之下的所有内容。MoPaaS希望在中间起到了承上启下的重要作用,并立志于打造一个融合的生态环境。
你可以将其理解为一个云开放平台,上接IaaS提供商,下游和SaaS合作,中间层除了自己提供的一些开发、调试工具和资源外,也会接入很多第三方的资源,让开发者在我们的平台上可以得到一站式的服务。
同时我们也为客户提供私有云平台的技术解决方案,涉及的领域包括:国内外一些有实力的IT整体解决方案的公司,学校园区等政府机构,以及金融保险公司等等。
《21世纪》:IaaS、PaaS和SaaS等云计算的三个层级中,PaaS被认为难以建立很好盈利模式的环节,你们为何依然专注这个领域?和之前的PaaS有何不同?
鲁为民:一般情况下,IaaS只为客户提供虚拟主机等最基础的服务,但这对于开发者而言显然是不够的,所以需要MoPaaS这样的平台提供应用开发、测试、调试等工具和资源等,上层承载SaaS,提供在线软件服务。
我将之前的PaaS归为第一代 PaaS,他们有几个问题:一是与提供基础的IaaS割裂,没有很好的连接融合,满足不了开发者的需求;二是主要面对个体开发者,导致盈利很难;还有一些PaaS选择了相对封闭的模式,不够开放。因此,很多人不看好这种模式。
但我们一直认为,这个领域还是存在很大的机会,尽管目前很多企业已经升级为SaaS,但对于主流SaaS提供商而言,大多不会把更多精力投入到底层IaaS和中间层PaaS上,所谓术业有专攻。
同时,传统的IT公司转型做IaaS和SaaS是比较容易的事情,但对于PaaS这部分需要有强大的技术实力来支持,虽然门槛很高,但市场机遇也更广阔。
我们目前的模式和以前有所不同,是一个云开放平台,不仅面对个人开发者,也面临企业级用户,可以解决盈利的问题。
《21世纪》:目前有哪些合作伙伴?利益如何分配?
鲁为民: MoPaaS整合了上下游的一些云计算公司,下游的IaaS和上游的SaaS,只要是在这个生态中的都可以是我们的合作伙伴。目前我们跟一些大的云公司,例如华为、金山云、腾讯云、青云、Ucloud等都建立了合作关系。SaaS的部分我们整合了一些类似支付、CSDN、OSC、Gitcafe、Github、人脸识别技术等SaaS的技术功能。而合作的方式是多方面的,例如资源的互相调用,提供解决方案,以及分成,甚至建立合资公司等等。
大数据还是有很多局限
《21世纪》:你刚回国也做过一年的大数据,为什么放弃而转做云计算?
鲁为民:大数据当时是比较新的东西,了解的人不多。当时我们基于hadoop做了一些数据的处理、存储和检索的应用。但后来发现,很少有人用,那么用户离技术太远,没有一个好的框架让用户来使用一个好的工具。
我们之后就觉得与其提供这种零散的服务,不如找一个好的框架把服务包装起来,而当时 PaaS刚刚在硅谷开始,所以顺着这个方向完成转型。
《21世纪》:大数据和云计算常被同时提起,你如何看待这两者之间的关系?
鲁为民:两者关系紧密,就像我们的转型,以前的大数据很自然而然地成为我这个云平台的一部分。这些数据除了我们自己使用之外,也可以提供给客户。
PaaS主要是跟应用接近,因为我们是支撑应用。现在很多应用离不开数据,比如一个应用想了解用户的行为,那么就需要收集很多大数据,此外,用户和应用的交互很多方面也是通过数据来完成的。我们的云平台实际很重要的模块,就是提供各种各样的数据服务,数据服务是属于平台服务的一部分。
从大的方面看,这两者之间是提供相互支撑的。大数据是云计算主要的一个应用,同时云计算为大数据提供一些能力,对有效地处理大数据有很大帮助。
《21世纪》:你如何看待目前大数据的发展?
鲁为民:大数据本身是一种实实在在的技术,所以应该不是一种泡沫。但在应用方面,在市场普及过程中,让人们觉得无所不能,其实大数据还是有很多局限。
大数据应该关注的是,如何让数据有用;另一方面,数据是不是越多越好?因为大家觉得是大数据了,不应该把数据浪费掉。但实际上不管你的计算能力有多强,总有一个计算负担限度,首先计算的负担越大,产生有效结果的可能性就越小。
现在大家都觉得算法可以解决这个问题,其实不行,包括深度学习实际上只是个算法。如果数据杂质太多就会拉低结果的准确性。我觉得应该把数据当作一种链的概念来处理。就是数据从进来到出来,每一个环节都应该有一定的处理,像清洗、删选等。同时数据链的每个环节应该都有交互,数据处理完之后的信息必须提供给环节,或者后阶段的环节反馈给前面产生一个更好的结果。只有从系统的科学角度来考虑才能处理,而不是直接把数据拿来就学习,这不太可能。
算法提供的东西实际上越来越有限,更多的是数据本身,如何用最少的有效数据,让计算变得更简单,这样才能对它进行实时的处理,才能及时地给用户提供有效的数据。
投资者还在观察PaaS
《21世纪》:从市场来看,目前IT行业和传统行业的需求有何不同?这两个行业在使用云计算过程中存在什么样的问题?
鲁为民:传统的企业以及IT行业对PaaS都有需求,IT企业接触PaaS相对更早一些,传统企业相对较慢一些。传统企业的技术团队可能要重新学习新的技术规范,因此,传统企业中,高层都会大力支持,但下面的执行团队可能还需要一些时间适应。
《21世纪》:资本目前如何看待云计算的创业公司?
鲁为民:资本层面上来说,从去年到现在,对IaaS模式已经很熟悉了,一些创业公司都获得了很大的融资,至少在这部分已经形成共识。
而PaaS,投资者还在观察,但是我相信不会太远了,我们已经获得了资本市场的一些融资,因为价值已经体现了,收入也增加了,相信接下来资本市场会更关注这一块儿。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
“最近复购率一直在下降,我们的营销力度不小啊,为什么用户还是走了?” “是不是广告投放的用户质量不高?还是我们的产品问题 ...
2025-02-21以下文章来源于数有道 ,作者数据星爷 SQL查询是数据分析工作的基础,也是CDA数据分析师一级的核心考点,人工智能时代,AI能为 ...
2025-02-19在当今这个数据驱动的时代,几乎每一个业务决策都离不开对数据的深入分析。而其中,指标波动归因分析更是至关重要的一环。无论是 ...
2025-02-18当数据开始说谎:那些年我们交过的学费 你有没有经历过这样的场景?熬了三个通宵做的数据分析报告,在会议上被老板一句"这数据靠 ...
2025-02-17数据分析作为一门跨学科领域,融合了统计学、编程、业务理解和可视化技术。无论是初学者还是有一定经验的从业者,系统化的学习路 ...
2025-02-17挖掘用户价值本质是让企业从‘赚今天的钱’升级为‘赚未来的钱’,同时让用户从‘被推销’变为‘被满足’。询问deepseek关于挖 ...
2025-02-17近来deepseek爆火,看看deepseek能否帮我们快速实现数据看板实时更新。 可以看出这对不知道怎么动手的小白来说是相当友好的, ...
2025-02-14一秒精通 Deepseek,不用找教程,不用买资料,更不用报一堆垃圾课程,所有这么去做的,都是舍近求远,因为你忽略了 deepseek 的 ...
2025-02-12自学 Python 的关键在于高效规划 + 实践驱动。以下是一份适合零基础快速入门的自学路径,结合资源推荐和实用技巧: 一、快速入 ...
2025-02-12“我们的利润率上升了,但销售额却没变,这是为什么?” “某个业务的市场份额在下滑,到底是什么原因?” “公司整体业绩 ...
2025-02-08活动介绍 为了助力大家在数据分析领域不断精进技能,我们特别举办本期打卡活动。在这里,你可以充分利用碎片化时间在线学习,让 ...
2025-02-071、闺女,醒醒,媒人把相亲的带来了。 我。。。。。。。 2、前年春节相亲相了40个, 去年春节相亲50个, 祖宗,今年你想相多少个 ...
2025-02-06在数据科学的广阔领域中,统计分析与数据挖掘占据了重要位置。尽管它们常常被视为有关联的领域,但两者在理论基础、目标、方法及 ...
2025-02-05在数据分析的世界里,“对比”是一种简单且有效的方法。这就像两个女孩子穿同一款式的衣服,效果不一样。 很多人都听过“货比三 ...
2025-02-05当我们只有非常少量的已标记数据,同时有大量未标记数据点时,可以使用半监督学习算法来处理。在sklearn中,基于图算法的半监督 ...
2025-02-05考虑一种棘手的情况:训练数据中大部分样本没有标签。此时,我们可以考虑使用半监督学习方法来处理。半监督学习能够利用这些额 ...
2025-02-04一、数学函数 1、取整 =INT(数字) 2、求余数 =MOD(除数,被除数) 3、四舍五入 =ROUND(数字,保留小数位数) 4、取绝对值 =AB ...
2025-02-03作者:CDA持证人 余治国 一般各平台出薪资报告,都会哀嚎遍野。举个例子,去年某招聘平台发布《中国女性职场现状调查报告》, ...
2025-02-02真正的数据分析大神是什么样的呢?有人认为他们能轻松驾驭各种分析工具,能够从海量数据中找到潜在关联,或者一眼识别报告中的数 ...
2025-02-01现今社会,“转行”似乎成无数职场人无法回避的话题。但行业就像座围城:外行人看光鲜,内行人看心酸。数据分析这个行业,近几年 ...
2025-01-31