更多的数据会带来更好的决定
在「大数据」时代的很多领域流传着这样一句谚语:如果你拥有的数据越多,那么所能做出的决定就会更加得精准。那么在现实生活中真的是这样吗?又或者如我过去所指出的,我们现在所获得的分析比以前更没有代表性吗?
一个非常典型的例子就是全球肥胖率,让我们意识到拥有更多的数据,甚至是实时数据,如果没有意愿或者没有足够毅力和耐力采取实际行动那么这些数据的价值是微乎其微的。当代的普通市民从未像现在一样存在足够多的方式来监控健康的方方面面。联网体重秤在每天清晨能够记录我们的体重;智能手机端的条形扫描能够记录我们消耗的每个卡路里;心率传感器和血氧传感器能够每隔几秒监控我们的剧烈运动;计步器能够追踪你的步数;从血压计到葡萄糖计的大量其他医疗设备都能传达关乎我们健康生活的精准数据。而这个不断膨胀的市场甚至出现了要求血液和基因测试的产品。
那么为什么在这些能够频繁接触各种健康监测设备的国家内肥胖率却不断刷新历史最高记录?我们只需要点几下鼠标就能基于最近几天的锻炼方式和每天记录的体重变化来提供独立个体的理想卡路里摄入,但是为何这些精准的数据无法转换成为完美的健康哪?这是一个非常值得深思的问题,我们正激发出「庞大的创新力」来发掘欺诈设备的各种方式,而不是将它们作为工具来改善我们的健康。
问题是访问这些数据并非简单地等同于充分利用这些数据。正如我在今年三月份所指出的,美国政府不乏庞大的精细数据,但是缺乏处理数据的专业技能和授权并将所有的数据转换到具体措施。一家典型的美国服装公司通常具备庞大的数据监测从 T 恤开始缝的第一针开始到 T 恤被消费者购买并带出商店的整个过程的运作。而问题是如何将这些复杂的数据串联整合起来用于解决商业挑战
我所接触的太多公司和机构都视「大数据」孵化和数据分析是充满神奇力量的解决方案,简单地认为只需要获得足够多的数据能够立即推动现有的业务。近年来多家公司疯狂投资物理和数字传感器并尝试和现有业务进行融合,然而他们都还没有搞清楚所有这些数据希望能够解答什么样的问题,且在这样匆忙地部署传感器到现有公司生态系统中是否会产生盲点等等。事实上,这种情况已经在社会多媒体分析领域存在,我经常能够看到公司凭借令人难以置信的高分辨率社交媒体地理上来映射社会观点,与此同时却忽略了在这些地图上依然处于黑暗中的地区,创建了其他分析师在其他分析渠道从未关注的盲区。
在数据社区存在这样一种共识:充足的数据就像是一锅粥,而噪声和偏见就像老鼠屎能够破坏整锅粥的味道。而问题是当我们不断往锅中投入食材(数据),整锅粥并不会因此重新回归到正确的味道,反而会增强偏见的存在。在这样的情况下,小型且更平衡的数据池或许可以散发出更迷人的香气。事实上,正是这种信念在庞大的数据面前催生出纠正导致情感分析领域迷失所有弊端的能量。
信息过载同样也是驱动迫使人类朝人工智能(AI)聊天机器人发展的重要因素。当企业争夺越来越多的大数据,他们已经不再能够在庞大的显示器面前简单地挖掘包含数千项指标的所有数据。他们需要人工智能来对所有数据进行筛选并总结预判事物未来的走向。
事实上,昨天华盛顿邮报刊登了极具震撼力的新闻报道,当医生被接二连三的自动警报淹没的时候那些在医院接受治疗的患者却承受了极大的痛苦。在未来电子医疗记录系统将会聚合不断发展的详尽医疗指标,通过减少医疗错误的精准算法让接近于无限次的合理交互和丰富的领域知识储备逐渐成型。换言之,你可以设想乘坐一辆无人驾驶汽车在繁忙的城市街道穿行,那么人类驾驶员可以幸福地不去关注车辆前方有什么东西,无人驾驶汽车的丰富传感器能够避免数千种潜在危险并预估实际上可能会产生什么后果。以医疗警报为例,合法警报容易在大量的误报中丢失,那么同样可以引申这样的观点–大部分网络安全警报容易在合法却不恰当的流量上丢失。
综上所述,或许大数据今后的焦点应该更少的集中在通过任意部署来收集越来越多的数据,而是更多的聚焦到如何筛选能够反应所提问题的小型辅助数据流上。又或者随着人工智能的成熟,在未来能够竞争应付无限庞大的数据并解决处理所有的问题。在文章的最后,给企业的一点建议是必须更少的依赖数据收集而应该花费更多的时间和精力去深挖如何对数据进行分析。
数据分析咨询请扫描二维码
《Python数据分析极简入门》 第2节 5 Pandas数学计算 importpandasaspdd=np.array([[81,&n ...
2024-11-23数据分析涉及多个方面的学习,包括理论知识和实践技能。以下是数据分析需要学习的主要方面: 基础知识: 数据分析的基本概念 ...
2024-11-22数据分析适合在多个单位工作,包括但不限于以下领域: 金融行业:金融行业对数据分析人才的需求非常大,数据分析师可以从事经 ...
2024-11-22数据分析是一种涉及从大量数据中提取有用信息和洞察力的过程。其工作内容主要包括以下几个方面: 数据收集与整理:数据分析师 ...
2024-11-22数据分析师需要掌握多种技能,以确保能够有效地处理和分析数据,并为业务决策提供支持。以下是数据分析师需要掌握的主要技能: ...
2024-11-22数据开发和数据分析是两个密切相关但又有所区别的领域。以下是它们的主要区别: 定义和目标: 数据开发:数据开发涉及数据的 ...
2024-11-22数据架构师是负责设计和管理企业数据架构的关键角色,其职责涵盖了多个方面,包括数据治理、数据模型设计、数据仓库构建、数据安 ...
2024-11-22数据分析师需要具备一系列技能,以确保能够有效地处理、分析和解释数据,从而支持决策制定。以下是数据分析师所需的关键技能: ...
2024-11-22数据分析师需要具备一系列技能,以确保能够有效地处理、分析和解释数据,从而支持决策制定。以下是数据分析师所需的关键技能: ...
2024-11-22数据分析师需要具备一系列的技能和能力,以确保能够有效地处理、分析和解释数据,从而支持业务决策。以下是数据分析师所需的主要 ...
2024-11-22需求持续增长 - 未来数据分析师需求将持续上升,企业对数据驱动决策的依赖加深。 - 预测到2025年,中国将需要高达220万的数据人 ...
2024-11-22《Python数据分析极简入门》 第2节 4 Pandas条件查询 在pandas中,可以使用条件筛选来选择满足特定条件的数据 importpanda ...
2024-11-22数据分析师的工作内容涉及多个方面,主要包括数据的收集、整理、分析和可视化,以支持商业决策和问题解决。以下是数据分析师的一 ...
2024-11-21数据分析师必须掌握的技能可以从多个方面进行归纳和总结。以下是数据分析师需要具备的主要技能: 统计学基础:数据分析师需要 ...
2024-11-21数据分析入门的难易程度因人而异,总体来看,入门并不算特别困难,但需要一定的学习和实践积累。 入门难度:数据分析入门相对 ...
2024-11-21数据分析是一项通过收集、整理和解释数据来发现有用信息的过程,它在现代社会中具有广泛的应用和重要性。数据分析能够帮助人们更 ...
2024-11-21数据分析行业正在迅速发展,随着技术的不断进步和数据量的爆炸式增长,企业对数据分析人才的需求也与日俱增。本文将探讨数据分析 ...
2024-11-21数据分析的常用方法包括多种技术,每种方法都有其特定的应用场景和优势。以下是几种常见的数据分析方法: 对比分析法:通过比 ...
2024-11-21企业数字化转型是指企业利用数字技术对其业务进行改造和升级,以实现提高效率、降低成本、创新业务模式等目标的过程。这一过程不 ...
2024-11-21数据分析作为一个备受追捧的职业领域,吸引着越来越多的女性加入其中。对于女生而言,在选择成为一名数据分析师时,行业选择至关 ...
2024-11-21