NN和2NN工作机制

NN和2NN工作机制
NN和2NN工作机制
1.第一阶段:NameNode启动
(1)第一次启动NameNode格式化后,创建Fsimage和Edits文件。如果不是第一次启动,直接加载编辑日志和镜像文件到内存。
(2)客户端对元数据进行增删改的请求。
(3)NameNode记录操作日志,更新滚动日志。
(4)NameNode在内存中对数据进行增删改。
2.第二阶段:Secondary NameNode工作
(1)Secondary NameNode询问NameNode是否需要CheekPoint。直接带回NameNode检查结果。
(2)Secondary NameNode请求执行CheekPoint.
(3)NameNode滚动正在写的Edits日志。
(4)将滚动前的编辑日志和镜像文件拷贝到Secondary NameNode。
(5)Secondary NameNode加载编辑日志和镜像文件到内存,病合并。
(6)生成新的镜像文件fsimage.chkpoint.
(7)拷贝fsimage.chkpoint到NameNode.
(8)NameNode将fsimage.chkpoint重新命名成fsimage。
NN和2NN工作机制详解
Fsimage:NameNode 内存中元数据序列化后形成的文件。
Edits:记录客户端更新元数据信息的每一步操作(可通过 Edits 运算出元数据)。
Name

上一篇:Python从入门到精通视频(全60集) ☝☝☝


下一篇:NameNode && Secondary NameNode工作机制