热线电话：13121318867

登录
首页精彩阅读NameNode和Datanode分别是什么？
NameNode和Datanode分别是什么？
2020-05-12
收藏


HDFS集群有两类节点，并以管理者-工作者模式运行，即一个NameNode（管理者）和多个DataNode（工作者）。


NameNode是Master节点，有点类似Linux里的根目录，是管理文件系统的命名空间。管理数据块映射；处理客户端的读写请求；配置副本策略；管理HDFS的名称空间。而DataNode则负责存储client发来的数据块block；执行数据块的读写操作，是NameNode的小弟。

NameNode详解

作用：

Namenode起一个统领的作用，用户通过namenode来实现对其他数据的访问和操作，类似于root根目录的感觉。

Namenode包含：目录与数据块之间的关系（靠fsimage和edits来实现），数据块和节点之间的关系

fsimage文件与edits文件是Namenode结点上的核心文件。

DataNode详解

DataNode在HDFS中真正存储数据，首先解释块（block）的概念：

DataNode在存储数据的时候是按照block为单位读写数据的。block是hdfs读写数据的基本单位。


假设文件大小是100GB，从字节位置0开始，每128MB字节划分为一个block，依此类推，可以划分出很多的block。每个block就是128MB大小。block本质上是一个 逻辑概念，意味着block里面不会真正的存储数据，只是划分文件的。block里也会存副本，副本优点是安全，缺点是占空间。

看了这篇文章，有没有对Namenode和DataNode有更多的认识了。


CDA数据分析师考试相关入口一览（建议收藏）：

▷ 想报名CDA认证考试，点击>>>   “CDA报名” 了解CDA考试详情；

▷ 想加入CDA考试题库，点击>>> “CDA题库” 了解CDA考试详情；

▷ 想学习CDA考试教材，点击>>> “CDA教材” 了解CDA考试详情；

▷ 想查询CDA考试成绩，点击>>> “CDA成绩” 了解CDA考试详情；

▷ 想了解CDA考试含金量，点击>>> “CDA含金量” 了解CDA考试详情；

▷ 想获取CDA考试时间/费用/条件/大纲/通过率，点击 >>>“CDA考试官网” 了解CDA考试详情；

NameNode HDFS Linux

数据分析咨询请扫描二维码

上一篇Series是什么？
下一篇shuffle在Spark及Hadoop中的作用大吗？
CDA考试动态
CDA报考指南
热门栏目
最新资讯
更多
Copyright © 2015-present 北京国富如荷网络科技有限公司 All Rights Reserved.
京ICP备11001960号-9   京公网安备 11010802034615号   经营许可证编号：京B2-20210330
客服在线
立即咨询