大数据时代下,数据与信息安全如何完美平衡
随着互联网技术及其应用的发展,以大数据为代表的数据密集型技术将成为新时代技术变革的基础。但与此同时,数据的进一步集中和数据量的增加,使海量数据的安全防护面临巨大挑战,大数据在搜集、存储、使用等环节中仍面临着许多信息安全风险问题。大数据时代下,开发者该如何解决制约其发展的信息安全问题呢?
极光推送CTO兼首席科学家黄鑫分享了自己对信息安全的一些看法,并就数据分析与用户隐私的完美平衡进行了详细阐述。
谈到信息安全时,黄鑫首先表达了自己眼中的信息安全概念,并把信息概念分成三大类:
一是信息层面安全
学校中的信息安全专业,主要致力于通信加密,密码加固等传统的安全领域;二是用户层面的信息安全,也就是说用户把信息存储到了你的服务器上,你要怎么样保证用户的隐私不受侵犯;三是架构层面的信息安全,简而言之,就是如何保证信息不丢。
那么逐个剖析,从最简单的说起,我们为什么要从HTTP切换到HTTPS,为什么有一天大家都抛弃了HTTP而投向了HTTPS的怀抱,毕竟HTTPS需要消耗比HTTP更大的硬件开销,在架构层面同样需要做出很多的调整。那是因为HTTP无论对于网络传输的内容,还是对于协议本身信息都没有做过任何的加密,从而使得用户的任何信息在网络中都可能被捕获。这时,相信有人会讲,那我们是一个内容浏览类的网站,用户并不需要输入信息,是否就可以不使用HTTPS了呢?
答案是使用HTTP不仅会发生泄漏数据,还会发生注入数据,这也是我们常常提到了流量劫持。当然,由于HTTPS对于服务器资源的消耗,HTTP也推出了HTTP/2,除了一些新的特性之外,当然也加入了信息加密的功能。另外,密码的加密也是老生常谈,密码的加密是一个听上去简单实际很复杂的事情,归根结底,密码加密是一个需要平衡的事情,如果采用简单加密方式(例如MD5),那么自然也会容易被解密,但是如果采用复杂加密算法,自然也对CPU提出了更高的要求。
第二点就是用户层面的信息安全
用户隐私在近年来被提升到了一个前所未有的高度,大数据时代人人都在做数据分析,却又人人都在做用户隐私,那么如何把握数据分析和用户隐私之间的平衡。也许在很久之前我们就触犯了“用户隐私”,当我们在电商网站上“喜欢也喜欢”的时候,这个数据来源于“用户隐私”;当我们在搜索引擎上看到“搜索广告”的时候,这个数据也来源于“用户隐私”;甚至可以说,如果我们严格地去界定“用户隐私”,那么如今的产品会死掉90%甚至更多,如此一来,我们到底如何去客观地理解用户隐私?
对于隐私的红线,黄鑫认为,用户的数据分析是机器可读但是人工不可读的。举个例子,在做用户的垃圾邮件过滤的时候,我们需要对每封邮件抽取特征,其中包括发件人、发件时间以及对于邮件正文内容的结构化抽取,然后通过分类算法对邮件进行分类。但是需要注意一点,这个过程,我们对“人”是不可见的,我们会对几千万的数据进行机器处理,处理的是宏观上的“大数据”。但若是通过人去扫描数据库,然后提取出了邮件记录并且去做人眼识别,那么这个行为是侵犯用户隐私的。
再者,是否侵犯用户隐私的一个隐含区分点是“侵犯隐私”之后做了什么,例如我们对搜索记录进行数据分析后为用户推荐了更好的结果,我们说这并不是侵犯数据隐私,但是如果对搜索结果进行分析后,我们将用户的资料提供给了某医院,那么用户隐私就被侵犯了,一言结之,是否侵犯隐私一定程度上关联与后续的操作是否侵犯到了用户切身的利益。
最后,是否侵犯隐私的一个标准在于我们最终暴露的是用户的什么信息。我们都知道DMP行业提供API使得DSP可以进行更加精准的广告投放,但是提供什么样的信息成为了关键,如果提供的是用户的消费记录,这个是侵犯隐私的,如果提供的是通过数据挖掘得到的收入水平,那么这个信息也许是不侵犯隐私的。 其实用户隐私是一个很敏感的词,也许这个词天生就与数据挖掘、数据分析互相抵触,法律上也并没有对相关的标准拉过红线,如何把握也许值得我们更深入地探讨。
第三点就是关于架构层面的安全
这一层面的安全说起来比较复杂,在此,黄鑫举了两个例子。第一,一份数据应该存多少份才能保证数据不丢,什么样的存储架构可以较好地平衡数据备份和存储成本之间的平衡。在存储上,我们希望平衡成本和可靠性,例如我们可以通过EC2冗余算法来平衡;再者我们需要多机房的互备来防止数据中心的灾难性事故,但是是否我们就是盲目地将存储成本除以2,这不但对于成本是巨大的消耗,对于网络带宽,磁盘压力也是种巨大的消耗,那么我们可以去折中地拆分数据的冷热分区,以及适当采用廉价磁盘+云备份的模式以保证整体数据的安全。第二,在存储架构上对于高安全性信息进行隔离。例如我们将用户的用户名、密码、盐存储在同一个数据库,对于入侵者而言,只要拖下来就全部获取了,那么我们是否应该将彼此依赖的盐、加密密码分离存储,或者采用更高的安全性方案进行存储,是值得我们探讨的事情。
另外,提及一个小的trick,由于MYSQL的各种入侵方法已经成熟的不能再成熟了,所以对于一些公司而言,不妨将一些敏感、又访问压力不大的信息存储与一些相对冷门的数据库中,这样可以在一定程度上加固信息的安全性。
信息安全是一个庞大的领域,其中涉及到很多知识点,目前大多公司都对其没有提及足够的重视。因为信息安全是一个“黑天鹅”事件,以至于大家不愿意在上面投入巨大的精力。 “希望随着国内对于安全的进一步重视,更多的公司也能在信息安全领域投入越来越多的关注。”
数据分析咨询请扫描二维码
在准备数据分析师面试时,掌握高频考题及其解答是应对面试的关键。为了帮助大家轻松上岸,以下是10个高频考题及其详细解析,外加 ...
2024-12-20互联网数据分析师是一个热门且综合性的职业,他们通过数据挖掘和分析,为企业的业务决策和运营优化提供强有力的支持。尤其在如今 ...
2024-12-20在现代商业环境中,数据分析师是不可或缺的角色。他们的工作不仅仅是对数据进行深入分析,更是协助企业从复杂的数据信息中提炼出 ...
2024-12-20随着大数据时代的到来,数据驱动的决策方式开始受到越来越多企业的青睐。近年来,数据分析在人力资源管理中正在扮演着至关重要的 ...
2024-12-20在数据分析的世界里,表面上的技术操作只是“入门票”,而真正的高手则需要打破一些“看不见的墙”。这些“隐形天花板”限制了数 ...
2024-12-19在数据分析领域,尽管行业前景广阔、岗位需求旺盛,但实际的工作难度却远超很多人的想象。很多新手初入数据分析岗位时,常常被各 ...
2024-12-19入门数据分析,许多人都会感到“难”,但这“难”究竟难在哪儿?对于新手而言,往往不是技术不行,而是思维方式、业务理解和实践 ...
2024-12-19在如今的行业动荡背景下,数据分析师的职业前景虽然面临一些挑战,但也充满了许多新的机会。随着技术的不断发展和多领域需求的提 ...
2024-12-19在信息爆炸的时代,数据分析师如同探险家,在浩瀚的数据海洋中寻觅有价值的宝藏。这不仅需要技术上的过硬实力,还需要一种艺术家 ...
2024-12-19在当今信息化社会,大数据已成为各行各业不可或缺的宝贵资源。大数据专业应运而生,旨在培养具备扎实理论基础和实践能力,能够应 ...
2024-12-19阿里P8、P9失业都找不到工作?是我们孤陋寡闻还是世界真的已经“癫”成这样了? 案例一:本硕都是 985,所学的专业也是当红专业 ...
2024-12-19CDA持证人Louis CDA持证人基本情况 我大学是在一个二线城市的一所普通二本院校读的,专业是旅游管理,非计算机非统计学。毕业之 ...
2024-12-18最近,知乎上有个很火的话题:“一个人为何会陷入社会底层”? 有人说,这个世界上只有一个分水岭,就是“羊水”;还有人说,一 ...
2024-12-18在这个数据驱动的时代,数据分析师的技能需求快速增长。掌握适当的编程语言不仅能增强分析能力,还能帮助分析师从海量数据中提取 ...
2024-12-17在当今信息爆炸的时代,数据分析已经成为许多行业中不可或缺的一部分。想要在这个领域脱颖而出,除了热情和毅力外,你还需要掌握 ...
2024-12-17数据分析,是一项通过科学方法处理数据以获取洞察并支持决策的艺术。无论是在商业环境中提升业绩,还是在科研领域推动创新,数据 ...
2024-12-17在数据分析领域,图表是我们表达数据故事的重要工具。它们不仅让数据变得更加直观,也帮助我们更好地理解数据中的趋势和模式。相 ...
2024-12-16在当今社会,我们身处着一个飞速发展、变化迅猛的时代。不同行业在科技进步、市场需求和政策支持的推动下蓬勃发展,呈现出令人瞩 ...
2024-12-16在现代商业世界中,数据分析师扮演着至关重要的角色。他们通过解析海量数据,为企业战略决策提供有力支持。要有效完成这项任务, ...
2024-12-16在当今数据爆炸的时代,数据分析师是组织中不可或缺的导航者。他们通过从大量数据中提取可操作的洞察力,帮助企业在竞争激烈的市 ...
2024-12-16