大数据时代下,数据与信息安全如何完美平衡
随着互联网技术及其应用的发展,以大数据为代表的数据密集型技术将成为新时代技术变革的基础。但与此同时,数据的进一步集中和数据量的增加,使海量数据的安全防护面临巨大挑战,大数据在搜集、存储、使用等环节中仍面临着许多信息安全风险问题。大数据时代下,开发者该如何解决制约其发展的信息安全问题呢?
极光推送CTO兼首席科学家黄鑫分享了自己对信息安全的一些看法,并就数据分析与用户隐私的完美平衡进行了详细阐述。
谈到信息安全时,黄鑫首先表达了自己眼中的信息安全概念,并把信息概念分成三大类:
一是信息层面安全
学校中的信息安全专业,主要致力于通信加密,密码加固等传统的安全领域;二是用户层面的信息安全,也就是说用户把信息存储到了你的服务器上,你要怎么样保证用户的隐私不受侵犯;三是架构层面的信息安全,简而言之,就是如何保证信息不丢。
那么逐个剖析,从最简单的说起,我们为什么要从HTTP切换到HTTPS,为什么有一天大家都抛弃了HTTP而投向了HTTPS的怀抱,毕竟HTTPS需要消耗比HTTP更大的硬件开销,在架构层面同样需要做出很多的调整。那是因为HTTP无论对于网络传输的内容,还是对于协议本身信息都没有做过任何的加密,从而使得用户的任何信息在网络中都可能被捕获。这时,相信有人会讲,那我们是一个内容浏览类的网站,用户并不需要输入信息,是否就可以不使用HTTPS了呢?
答案是使用HTTP不仅会发生泄漏数据,还会发生注入数据,这也是我们常常提到了流量劫持。当然,由于HTTPS对于服务器资源的消耗,HTTP也推出了HTTP/2,除了一些新的特性之外,当然也加入了信息加密的功能。另外,密码的加密也是老生常谈,密码的加密是一个听上去简单实际很复杂的事情,归根结底,密码加密是一个需要平衡的事情,如果采用简单加密方式(例如MD5),那么自然也会容易被解密,但是如果采用复杂加密算法,自然也对CPU提出了更高的要求。
第二点就是用户层面的信息安全
用户隐私在近年来被提升到了一个前所未有的高度,大数据时代人人都在做数据分析,却又人人都在做用户隐私,那么如何把握数据分析和用户隐私之间的平衡。也许在很久之前我们就触犯了“用户隐私”,当我们在电商网站上“喜欢也喜欢”的时候,这个数据来源于“用户隐私”;当我们在搜索引擎上看到“搜索广告”的时候,这个数据也来源于“用户隐私”;甚至可以说,如果我们严格地去界定“用户隐私”,那么如今的产品会死掉90%甚至更多,如此一来,我们到底如何去客观地理解用户隐私?
对于隐私的红线,黄鑫认为,用户的数据分析是机器可读但是人工不可读的。举个例子,在做用户的垃圾邮件过滤的时候,我们需要对每封邮件抽取特征,其中包括发件人、发件时间以及对于邮件正文内容的结构化抽取,然后通过分类算法对邮件进行分类。但是需要注意一点,这个过程,我们对“人”是不可见的,我们会对几千万的数据进行机器处理,处理的是宏观上的“大数据”。但若是通过人去扫描数据库,然后提取出了邮件记录并且去做人眼识别,那么这个行为是侵犯用户隐私的。
再者,是否侵犯用户隐私的一个隐含区分点是“侵犯隐私”之后做了什么,例如我们对搜索记录进行数据分析后为用户推荐了更好的结果,我们说这并不是侵犯数据隐私,但是如果对搜索结果进行分析后,我们将用户的资料提供给了某医院,那么用户隐私就被侵犯了,一言结之,是否侵犯隐私一定程度上关联与后续的操作是否侵犯到了用户切身的利益。
最后,是否侵犯隐私的一个标准在于我们最终暴露的是用户的什么信息。我们都知道DMP行业提供API使得DSP可以进行更加精准的广告投放,但是提供什么样的信息成为了关键,如果提供的是用户的消费记录,这个是侵犯隐私的,如果提供的是通过数据挖掘得到的收入水平,那么这个信息也许是不侵犯隐私的。 其实用户隐私是一个很敏感的词,也许这个词天生就与数据挖掘、数据分析互相抵触,法律上也并没有对相关的标准拉过红线,如何把握也许值得我们更深入地探讨。
第三点就是关于架构层面的安全
这一层面的安全说起来比较复杂,在此,黄鑫举了两个例子。第一,一份数据应该存多少份才能保证数据不丢,什么样的存储架构可以较好地平衡数据备份和存储成本之间的平衡。在存储上,我们希望平衡成本和可靠性,例如我们可以通过EC2冗余算法来平衡;再者我们需要多机房的互备来防止数据中心的灾难性事故,但是是否我们就是盲目地将存储成本除以2,这不但对于成本是巨大的消耗,对于网络带宽,磁盘压力也是种巨大的消耗,那么我们可以去折中地拆分数据的冷热分区,以及适当采用廉价磁盘+云备份的模式以保证整体数据的安全。第二,在存储架构上对于高安全性信息进行隔离。例如我们将用户的用户名、密码、盐存储在同一个数据库,对于入侵者而言,只要拖下来就全部获取了,那么我们是否应该将彼此依赖的盐、加密密码分离存储,或者采用更高的安全性方案进行存储,是值得我们探讨的事情。
另外,提及一个小的trick,由于MYSQL的各种入侵方法已经成熟的不能再成熟了,所以对于一些公司而言,不妨将一些敏感、又访问压力不大的信息存储与一些相对冷门的数据库中,这样可以在一定程度上加固信息的安全性。
信息安全是一个庞大的领域,其中涉及到很多知识点,目前大多公司都对其没有提及足够的重视。因为信息安全是一个“黑天鹅”事件,以至于大家不愿意在上面投入巨大的精力。 “希望随着国内对于安全的进一步重视,更多的公司也能在信息安全领域投入越来越多的关注。”
数据分析咨询请扫描二维码
CDA数据分析师认证:CDA认证分为三个等级:Level Ⅰ、Level Ⅱ和Level Ⅲ,每个等级的报考条件如下: Le ...
2024-11-14自学数据分析可能是一条充满挑战却又令人兴奋的道路。随着数据在现代社会中的重要性日益增长,掌握数据分析技能不仅能提升你的就 ...
2024-11-14数据分析相关职业选择 数据分析领域正在蓬勃发展,为各种专业背景的人才提供了丰富的职业机会。从初学者到有经验的专家,每个人 ...
2024-11-14数据挖掘与分析在金融行业的使用 在当今快速发展的金融行业中,数据挖掘与分析的应用愈发重要,成为驱动行业变革和提升竞争力的 ...
2024-11-14学习数据挖掘需要掌握哪些技能 数据挖掘是一个不断发展的领域,它结合了统计学、计算机科学和领域专业知识,旨在从数据中提取有 ...
2024-11-14统计学作为一门基于数据的学科,其广泛的应用领域和多样的职业选择,使得毕业生拥有丰厚的就业前景。无论是在政府还是企业,统计 ...
2024-11-14在当今高速发展的技术环境下,企业正在面临前所未有的机遇和挑战。数字化转型已成为企业保持竞争力和应对市场变化的必由之路。要 ...
2024-11-13爬虫技术在数据分析中扮演着至关重要的角色,其主要作用体现在以下几个方面: 数据收集:爬虫能够自动化地从互联网上抓取大量数 ...
2024-11-13在数据分析中,数据可视化是一种将复杂数据转化为图表、图形或其他可视形式的技术,旨在通过直观的方式帮助人们理解数据的含义与 ...
2024-11-13在现代银行业中,数字化用户行为分析已成为优化产品和服务、提升客户体验和提高业务效率的重要工具。通过全面的数据采集、深入的 ...
2024-11-13在这个数据飞速增长的时代,企业若想在竞争中占据优势,必须充分利用数据分析优化其营销策略。数据不仅有助于理解市场趋势,还可 ...
2024-11-13数据分析行业的就业趋势显示出多个积极的发展方向。随着大数据和人工智能技术的不断进步,数据分析在各行各业中的应用变得越来越 ...
2024-11-13市场数据分析是一门涉及多种技能和工具的学科,对企业在竞争激烈的市场中保持竞争力至关重要。通过数据分析,企业不仅可以了解当 ...
2024-11-13数据分析与数据挖掘是数据科学领域中两个关键的组成部分,它们各有独特的目标、方法和应用场景。尽管它们经常在实际应用中结合使 ...
2024-11-13在如今这个数据驱动的时代,数据分析能力已经成为许多行业的重要技能。无论是为工作需要,还是为了职业转型,掌握数据分析都能够 ...
2024-11-13在如今这个数据驱动的时代,数据分析能力已经成为许多行业的重要技能。无论是为工作需要,还是为了职业转型,掌握数据分析都能够 ...
2024-11-13作为一名业务分析师,你肩负着将业务需求转化为技术解决方案的重任。面试这一角色时,涉及的问题多种多样,涵盖技术技能、分析能 ...
2024-11-13自学数据分析可能看似一项艰巨的任务,尤其在开始时。但是,通过一些策略和方法,你可以系统地学习和掌握数据分析的相关知识和技 ...
2024-11-10Excel是数据分析领域中的一款强大工具,它凭借其灵活的功能和易用的界面,成为了许多数据分析师和从业者的首选。无论是简单的数 ...
2024-11-10在快速发展的商业环境中,数据分析能力已经成为许多行业的核心竞争力。无论是初学者还是经验丰富的专家,搭建一个有效的数据分析 ...
2024-11-10