潘杭琳:大数据是共享型资源_数据分析师考试
“中国制造2025暨德国工业4.0峰会”于2015年7月2日在北京召开。中德设计协会常务副会长潘杭琳出席并演讲。
以下为演讲实录:
潘杭琳:大家下午好!
我姓潘,潘杭琳,在德国15年,今天非常荣幸,我们受中小企业协会的邀请,到这里来。我和大家分享一下这十几年在德国看着数据科学是怎么一步一步从最初的一些科研项目,然后一步一步被社会化网络推动着,最后变成相当于谁也无法用原有的一些框架去迎接它的挑战的这么一种形式。然后又看到全世界的这些数据科学家是怎么样群策群力来解决真正的海量大数据的。
我们一直以来都是在不断地对数据加深理解,在座的都知道,计算机存在的时候,它就叫做信息了。很多的数据只要能存起来,它就是信息。有用的信息叫做数据,有用的数据叫做规则,有用的规则叫做智慧。有一种说法就是信息、数据、规则、智慧,这四步。
真正对我们人类有用的应该是最后一步,就是智慧。要达到智慧这一步,我们经历了各种各样的探索,曾经做过一个项目,有过好多学科进行交叉,有过存在论,有过智库,有过数据挖掘,一步一步,到最近在中国,反正前两年一下子大数据这个名词起来了。其实大数据这个名词1980年就有了。
2014年,大家就看到了很多流数据,视频流也好,这个数据过去就没有的,但是这个数据我们还是需要从它里面提炼出一些东西来的。2014年,我们有一个新名词叫做块数据,这个是新成立的贵州大数据产业园他们有一个好的说法,它把一些数据成块,作为块里面是共享了,它叫做块数据。
我们从一个更广阔的领域来看,大数据应该像海一样的,叫海数据,我的数据可以放在公开的地方,大家都可以享用,这才是真正的大数据。后面的几页,我就跟大家讲大数据快车不是现在才有的,一直就有,只是我们要走对路,要走对真正的大数据。LOOD就是连在一起的开放数据,这才是我们认为的大数据。
我先介绍一下我自己本人,我在德国是在马克斯。普朗克研究院信息研究所,右上方是德国的计算机之父,是他在整个德国之内把各个计算机系建起来的。他最经典的理论就是他理解了相等理论,他知道了信息商是怎么来的,知道信息的本原是什么。我在马克斯普朗克研究院12年,来来往往后面一起合作。通过这个平台接触到了全世界范围之内的各类广大数据的领域的团队和机构。
目前大家都讲工业2025和工业4.0,其实工业2025和工业4.0也少不了数据,我们看看信息化,人工智能实用化两头是怎么走的。马克斯普朗克研究院,德国的诺贝尔奖有一半来自于这个研究院,由它很自然召集起我们所说的世界级研究机构一起来看看大数据这个难题。他们成立了一个OPENLINKED DATA,我们是最早的发起人之一。
大数据最早用的是IBM[微博]的WATSON,它做了2014年600亿美金的产值,但是你去查一下IBM的WATSON,它的白皮书里面唯一引用的两个科研成果,一个就是来自于我们团队,就是刚才那张照片里面的团队。
我们团队也跟斯坦福和麻省理工大学对换博士生,我们承接VLDB,真正的大数据国际协会,还有国际数据工程,然后网络,然后信息检索,还有数据管理等等这些国际化的最顶层的搞大数据的专业协会,都是我们这个团队很多人分别当各类的评审,然后组织者这样的。
我自己本人现在是国家科技资源共享服务工程技术研究中心的特聘专家,这是共享,突出一个字,资源共享,我们提供了很多的公开数据供全中国的人,甚至全世界的人来享用。
我们在当地,在萨尔这个地方,有很多德国朋友都知道萨尔是非常小的小地方,但是这个小地方很特殊,它有德国国家人工智能研究中心,它拥有了SMARTFACTORY,也就是智慧工厂全世界的注册商标。所以,实际上工业4.0里面核心的这个东西,是来自于DFK1,LPI和NLP连在一起的,这个就是自然语言处理。把人都理解不了的东西用计算机来理解,最后做了人是没有这个智力,也没有这个时间去把全世界的信息全部整理起来一个智库的,但是我们可以用计算机来帮我们做。
当然,我也担任了中科院的一个项目职务。
这叫做海数据,我们最初在这个地方,我们的位置是在这个地方,德国是最先的先期,可能这个就是整个网站,整个雅虎所有数据就是这一个点。一般来说,整个网站在我们这里就属于一个节点,然后我们把这个节点按照类别,大家按照一个接口全部公开连在一起,这才是大数据。
工业4.0是大数据下面有工业大数据以后产生的量,肯定比刚才产生的互联网的数据还要大,原因它是流性质的,这个数据流过来流走的,你要及时处理了。如果你连这个都处理不了,后面就更加不可想象了。
因此,我们在考虑大数据基础架构之下,我们再如何看相当于对传统产业进行发展模式、组织结构和价值理念的重新构造。我们有足够多的案例帮助大家实现原来不可想象的大数据的管理。
大数据BT本身也像马云[微博]所说的,它是一个共享型的,我有的资源和你有的资源,我们都要拿出来,拿出来才有价值。当然要有一个保护的机制,但是双方一定要拿出来。
有一些观点也是可以共享的,这里就非常看中360公司的傅志华,他觉得企业里面就有一个画像,他觉得企业里面的数据就有数据基础平台,有业务运营监控,有用户体验优化,有精细化营销,有市场传播,还有经营分析,还有战略分析,我觉得他写得非常好。
我们想做的事情是,这是按照中国的企业的实际情况,它对应到大数据的一些应用上去,我们能做的是帮助它怎么样来进行这个跨越。企业的大数据应用的路线图应该是怎么样的。
对于企业家来说,我们不应该给他讲太多理论的东西,或者科研的东西,或者国外的东西,你就告诉他,一只手掌拿出来,你就告诉他五个“一”,这五个“一”他都知道什么意思,他就能用好大数据了。
第一,疑问。你的企业里面基础数据到底有哪些,哪些是可以数字化的,哪些是可以信息化的。
第二个,意向。企业用大数据想做什么,到底是做营销,还是做市场,还是做体验,还是做运营监控呢。你的意向,这个企业家要知道。
然后,要依托。你到底依托什么层次的人来对接,是依托科研性机构,还是公益性机构,还是专业的企业、商业公司,还是相当于国家的,也就是说国家队,或者是政府。这是你依托谁,跟谁一起合作最合适,这些一定要做好。
第四,依据。假如通过你的合作伙伴,因为我们自己一个公司不大可能去培养一个数据科学家的,数据科学家起码要十年培养。数据分析师倒是可以培养的,数据操作员更加可以培养。但是你培养这些人以后,这些数据帮你挖掘出什么来,哪些数据是能产生的,你把第四步依据和第五步依存做得好,你只要能够挖掘出数据的,哪怕你这个公司目前情况不好,你放心,在心里这个时代上,你的价值一定是陪着你的数据而存在的,就像一滴水,你这滴水放在平地里马上就会消失,但是放在大海里,永远不会干涸。这就是大数据要让你走到的这条路上,要有方法,又要有源数据20%,又要有数据检索,让你把意向、依托搞得更明确。然后要依据智慧的云服务帮你做,最后达到一个决策数,整体上,为你这个企业站好一个位置。
我们举一个例子吧,比如说,我讲我原来的校长,我原来浙大出来的,潘云鹤校长,目前有很多搜索引擎,我要找一下关于某一个人的基本概况,比如我现在为企业上一个项目,这个项目可能需要查一些资料,我们用大数据帮他查。比如这样一查,他的旁边我知道他的论文合作关系是谁,专利合作关系是谁,项目合作关系是谁,这个数据在大数据下面全有。我还可以查这个项目最近几年怎么样怎么样,近几年项目多少、专利多少、论文多少,我还可以查项目的具体信息。它的主要专业,计算机这才是真正的智慧化的检索。你要查一个人的时候,它会把这个人一切相关的专业方向全给你找出来,这是更加靠近人们所需要的对搜索引擎的一个要求。
其中,比如对传感器、网络不是很了解,我还可以对任何一个专业的任何一个术语再进行深入,任何一个学科的专业术语都能查出来中国最好的应该在哪里,最好的机构应该在哪里。用这种方式,真正把全中国的这些公开的数据全部都给它一网打尽。每一类又能知道某一个热点的事情,它在市场上,哪个地方最热,这个项目哪个项目是热点比较多一点。
所以,总的来说,只要大家把这个思路改过来,相当于用五个“一”,每一步都找对合适的合作伙伴,大数据不是那么遥不可及的,大家数据还是很容易能够碰得到的。不过,千万不要拿着造石子路的技术去修一个赛车道,然后让赛车去跑,这个太浪费了。我们最终科研大概是引领七到八年的,技术是引领三到四年的,企业是引领半年的。我们希望企业家一方面学习德国的培训的这一块,然后另一方面他要学会向科技提早五年看,提早三年看。技术是提早三年到五年,还有像科技,科学,科学是提早七年、八年看。我希望通过这么一个呼吁,希望大家更加多地和各种机构合作,最后只会让我们大家在一个共享,相当于众智分时、共享经济的框架下,真正把我们的实体经济,把我们的企业走到数据时代的大浪潮当中去。
最后我想说一句话,连美国的GE,通用汽车公司的老总CEO去年就说了,前一天晚上,我躺在床上还清清楚楚知道我们整个大企业,当然是美国制造业的龙头了,还是制造型企业。但是早上一早起来,就发现GE已经是一个数据公司了。既然他们都可以这样说,我们在座的各个企业家一定一定也要走到数据经济的浪潮里面来,走到这条大数据的快车道上面去。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在当今数据驱动的时代,数据分析能力备受青睐,数据分析能力频繁出现在岗位需求的描述中,不分岗位的任职要求中,会特意标出“熟 ...
2025-04-03在当今数字化时代,数据分析师的重要性与日俱增。但许多人在踏上这条职业道路时,往往充满疑惑: 如何成为一名数据分析师?成为 ...
2025-04-02最近我发现一个绝招,用DeepSeek AI处理Excel数据简直太爽了!处理速度嘎嘎快! 平常一整天的表格处理工作,现在只要三步就能搞 ...
2025-04-01你是否被统计学复杂的理论和晦涩的公式劝退过?别担心,“山有木兮:统计学极简入门(Python)” 将为你一一化解这些难题。课程 ...
2025-03-31在电商、零售、甚至内容付费业务中,你真的了解你的客户吗? 有些客户下了一两次单就消失了,有些人每个月都回购,有些人曾经是 ...
2025-03-31在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的需求持续飙升。世界经济论坛发布的《未来就业报告》, ...
2025-03-28你有没有遇到过这样的情况?流量进来了,转化率却不高,辛辛苦苦拉来的用户,最后大部分都悄无声息地离开了,这时候漏斗分析就非 ...
2025-03-27TensorFlow Datasets(TFDS)是一个用于下载、管理和预处理机器学习数据集的库。它提供了易于使用的API,允许用户从现有集合中 ...
2025-03-26"不谋全局者,不足谋一域。"在数据驱动的商业时代,战略级数据分析能力已成为职场核心竞争力。《CDA二级教材:商业策略数据分析 ...
2025-03-26当你在某宝刷到【猜你喜欢】时,当抖音精准推来你的梦中情猫时,当美团外卖弹窗刚好是你想吃的火锅店…… 恭喜你,你正在被用户 ...
2025-03-26当面试官问起随机森林时,他到底在考察什么? ""请解释随机森林的原理""——这是数据分析岗位面试中的经典问题。但你可能不知道 ...
2025-03-25在数字化浪潮席卷的当下,数据俨然成为企业的命脉,贯穿于业务运作的各个环节。从线上到线下,从平台的交易数据,到门店的运营 ...
2025-03-25在互联网和移动应用领域,DAU(日活跃用户数)是一个耳熟能详的指标。无论是产品经理、运营,还是数据分析师,DAU都是衡量产品 ...
2025-03-24ABtest做的好,产品优化效果差不了!可见ABtest在评估优化策略的效果方面地位还是很高的,那么如何在业务中应用ABtest? 结合企业 ...
2025-03-21在企业数据分析中,指标体系是至关重要的工具。不仅帮助企业统一数据标准、提升数据质量,还能为业务决策提供有力支持。本文将围 ...
2025-03-20解锁数据分析师高薪密码,CDA 脱产就业班助你逆袭! 在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的 ...
2025-03-19在 MySQL 数据库中,查询一张表但是不包含某个字段可以通过以下两种方法实现:使用 SELECT 子句以明确指定想要的字段,或者使 ...
2025-03-17在当今数字化时代,数据成为企业发展的关键驱动力,而用户画像作为数据分析的重要成果,改变了企业理解用户、开展业务的方式。无 ...
2025-03-172025年是智能体(AI Agent)的元年,大模型和智能体的发展比较迅猛。感觉年初的deepseek刚火没多久,这几天Manus又成为媒体头条 ...
2025-03-14以下的文章内容来源于柯家媛老师的专栏,如果您想阅读专栏《小白必备的数据思维课》,点击下方链接 https://edu.cda.cn/goods/sh ...
2025-03-13