小白学数据:一篇文章看懂NoSQL数据库
如果你关注大数据科技动向,可能听说过一个叫NoSQL数据库的名词,这可能让人有些云里雾里。其实我们处在一个激动人心的技术更迭时代,以甲骨文为代表的SQL数据库已经称霸了企业市场30年,而近年来的NoSQL则是强有力的更新换代的竞争者。这篇文章就通过问答的方式来给小白解释NoSQL数据库系统是什么,无论你的技术背景如何都能看得懂。对于数据分析从业人员来说,了解数据库的趋势可以让你的职业生涯如虎添翼;而对于工程师来说,了解新的基础系统更是必不可少的行业知识。
几个基本问题
小白问:数据库是什么东西,可以吃吗?
答:……不可以。数据库呢,就是存储数据的地方,就像冰箱是存储食物的地方一样。
小白问:诶?我的数据就存储在自己电脑里面的excel表里里,还要数据库干嘛?
答:自己的数据的确很方便,但是对于企业来说就不一样了。一个公司里面可能有成千上万的Excel表格,还在不同的电脑上,而他们的员工和客户需要实时看到企业给他们提供的所有数据,这种文件管理的方法就很麻烦,总不能每分钟都把一个新的巨大无比的excel文件发给所有客户呀!而且数据库更有用的是进行查询,企业会给内部或者客户开发不同的应用,而这些应用需要数据的时候可以直接实用数据库的查询语句快速得到结果。
小白问:哦,那是说所有的人都直接在这个系统上查数据和改数据吗?
答:是的,数据库也会帮助你处理“并发”,也就是如果多个人同时在改数据的情况。比如你在支付宝给小灰转账,而小灰这个时候又偏偏刚好在给你转账,这时候数据库系统就要保证你们两个人最后余额都是正确的,并且在你们进行交易的时候别人如果同时查询你们俩人的余额都会得到精确的结果。在一个企业系统中,一秒钟可能有成千上万个这样的查询和改动发生呢。
小白问:那SQL又是什么鬼?
答:SQL是一种可以查询关系型数据库的语言,关系型数据库也叫SQL数据库。
所谓关系型数据库就是数据是以表格的形式进行存储的,就和你电脑上的Excel表一样,数据是一行一列整整齐齐的躺着的。表格之间有着这样或那样的关系,可以通过某信息连接在一起 。想查这些表格里的任何数据的程序员们就可以把他们想要的数据形式转化成SQL语句然后发给数据库,得到数据结果。比如你可以有一个食物管理的数据库,里面有两个表(食物表和主人表),长成下面的这个样子:
食物编号食物名称数量 喜爱程度主人编号
1 猕猴桃 4 53
2 菠菜 10 2 2
3巧克力 99 1001
主人编号主人姓名 主人性别
1小白 女
2小黑 男
3小灰 男
我们可以写一句简单的SQL语句直接调出所有男主人拥有的食品及数量。
SELECT 主人姓名,食物名称,数量
FROM 食物表,主人表
WHERE 食物表.主人编号=主人表.主人编号 AND 主人性别=‘男’
=>
主人姓名食物名称数量
小黑菠菜10
小灰猕猴桃 4
深入聊聊
小白问:哦,那NoSQL到底有什么过人之处呢?
答:因为近年来企业要处理的数据越来越多,越来越复杂,就出现了两个之前关系型数据库解决不了的问题:快速增长的数据规模和日渐复杂的数据模型。
第一个问题就是数据越来越多,公司以前买的装关系型数据库的那台电脑放不下了,那这个时候就有两种选择:
一种就是直接去买一台更大空间的计算机取代现有的机器。这个方法是有限制的,因为这种机器的价格一般非常昂贵,而且这个空间总是有一个上限的。
另外一种选择就是再买一台机器,然后把新的数据放到新机器里的另外一个SQL数据库里面,这个过程也叫“分片”(sharding)。 这个时候程序员要开始杯具的加班了。因为这个转换的过程非常容易出问题,而且会给使用数据库的应用增加很多的复杂度。比如我们之前的例子,在查询食品和数量的语句的时候我们要将同样的语句同时发给两个服务器,然后把最后的结果综合起来,给应用的开发增加了很多不必要的负担。分片还有很多别的缺点我就不一一赘述了。
而NoSQL数据库的服务器本身就支持很多个机器存储数据进行分布式查询,这样当空间不够用的时候就直接去扛一台新的机器回来连接到已有的计算机集群上装好数据库即可,程序员可以回家睡个好觉啦。
小白问:明白了,那另外一个关系型数据库没有解决的问题呢?
答:另外的一个问题就是把数据放到SQL数据之前要进行数据建模,也就是要考虑好每一个表里面每一列都代表什么,不同的表格之间要怎样相互关联起来。这对很多公司来说是一件非常耗费时间和精力的事情,因为他们的数据源的种类太多了。而且在数据进入数据库之后,如果在表中增加新的一列(比如想把食物的种类加进第一个表中)或者是要改变某一列的特性的话,对于系统来说是非常困难的,因为表中的数据已经一行行的存好了。
而NoSQL数据库就减轻了数据建模的负担,比如上面的表里面的一行可以变成下面JSON文档的样子:
{
食物名称:猕猴桃,
数量:4,
喜爱程度:5,
主人:{
姓名:小灰,
性别:男
}
}
这样很方便的可以修改数据模型的样子,而且从源数据不需要怎么改就可以放入数据库。目前用有一个行业叫做ETL,就是专门做数据形状转化的:他们将不同的源数据打磨到想要的表格的模子里,然后放入关系型数据库。这个行业价值好几十亿美元呢,很疯狂吧?用了NoSQL,公司可以节省好多时间和人民币呢。
答:NoSQL其实有很多不同的种类的,适用在不同的情况中并且分别有不同的存储方法。JSON是文档类NoSQL的典型格式,我们平时使用的word和pdf文件都可以很容易放入文档型数据库进行查询。而其他种类的NoSQL也可能是用图或者哈希表的模型来存储数据。如果你的数据存储的是一个社交网络类型的应用,那么对你来说用一个基于图的数据库可能更加合适,因为你关心的社交网络场景中的问题都可以得到比较快速的回答。
答:哪有,NoSql其实是Not Only SQL,就是不仅仅是SQL,有一些NoSQL数据库还支持直接用SQL来做查询呢。两者的区别主要是我上面提到的两点: 1.对数据建模的要求不同:NoSQL的建模程序比较简单灵活;2.对数据增加的处理方式不同:使用NoSQL可以直接进行分布式处理。在数据规模增长需要增加新的机器的时候,不需要程序员对使用数据库的应用进行代码进行改动,直接在数据库集群中增加一台新的计算机就可以啦。
数据分析咨询请扫描二维码
在准备数据分析师面试时,掌握高频考题及其解答是应对面试的关键。为了帮助大家轻松上岸,以下是10个高频考题及其详细解析,外加 ...
2024-12-20互联网数据分析师是一个热门且综合性的职业,他们通过数据挖掘和分析,为企业的业务决策和运营优化提供强有力的支持。尤其在如今 ...
2024-12-20在现代商业环境中,数据分析师是不可或缺的角色。他们的工作不仅仅是对数据进行深入分析,更是协助企业从复杂的数据信息中提炼出 ...
2024-12-20随着大数据时代的到来,数据驱动的决策方式开始受到越来越多企业的青睐。近年来,数据分析在人力资源管理中正在扮演着至关重要的 ...
2024-12-20在数据分析的世界里,表面上的技术操作只是“入门票”,而真正的高手则需要打破一些“看不见的墙”。这些“隐形天花板”限制了数 ...
2024-12-19在数据分析领域,尽管行业前景广阔、岗位需求旺盛,但实际的工作难度却远超很多人的想象。很多新手初入数据分析岗位时,常常被各 ...
2024-12-19入门数据分析,许多人都会感到“难”,但这“难”究竟难在哪儿?对于新手而言,往往不是技术不行,而是思维方式、业务理解和实践 ...
2024-12-19在如今的行业动荡背景下,数据分析师的职业前景虽然面临一些挑战,但也充满了许多新的机会。随着技术的不断发展和多领域需求的提 ...
2024-12-19在信息爆炸的时代,数据分析师如同探险家,在浩瀚的数据海洋中寻觅有价值的宝藏。这不仅需要技术上的过硬实力,还需要一种艺术家 ...
2024-12-19在当今信息化社会,大数据已成为各行各业不可或缺的宝贵资源。大数据专业应运而生,旨在培养具备扎实理论基础和实践能力,能够应 ...
2024-12-19阿里P8、P9失业都找不到工作?是我们孤陋寡闻还是世界真的已经“癫”成这样了? 案例一:本硕都是 985,所学的专业也是当红专业 ...
2024-12-19CDA持证人Louis CDA持证人基本情况 我大学是在一个二线城市的一所普通二本院校读的,专业是旅游管理,非计算机非统计学。毕业之 ...
2024-12-18最近,知乎上有个很火的话题:“一个人为何会陷入社会底层”? 有人说,这个世界上只有一个分水岭,就是“羊水”;还有人说,一 ...
2024-12-18在这个数据驱动的时代,数据分析师的技能需求快速增长。掌握适当的编程语言不仅能增强分析能力,还能帮助分析师从海量数据中提取 ...
2024-12-17在当今信息爆炸的时代,数据分析已经成为许多行业中不可或缺的一部分。想要在这个领域脱颖而出,除了热情和毅力外,你还需要掌握 ...
2024-12-17数据分析,是一项通过科学方法处理数据以获取洞察并支持决策的艺术。无论是在商业环境中提升业绩,还是在科研领域推动创新,数据 ...
2024-12-17在数据分析领域,图表是我们表达数据故事的重要工具。它们不仅让数据变得更加直观,也帮助我们更好地理解数据中的趋势和模式。相 ...
2024-12-16在当今社会,我们身处着一个飞速发展、变化迅猛的时代。不同行业在科技进步、市场需求和政策支持的推动下蓬勃发展,呈现出令人瞩 ...
2024-12-16在现代商业世界中,数据分析师扮演着至关重要的角色。他们通过解析海量数据,为企业战略决策提供有力支持。要有效完成这项任务, ...
2024-12-16在当今数据爆炸的时代,数据分析师是组织中不可或缺的导航者。他们通过从大量数据中提取可操作的洞察力,帮助企业在竞争激烈的市 ...
2024-12-16