HDFS读数据流程

一、HDFS读数据流程图示

HDFS读数据流程

二、HDFS读数据流程

1、客户端通过Distributed FileSystem向NameNode请求下载文件,NameNode通过查询元数据,找到文件块所在的DataNode地址。

2、挑选一台DataNode(就近原则,然后随机)服务器,请求读取数据。

3、DataNode开始传输数据给客户端(从磁盘里面读取数据输入流,以Packet为单位来做校验)。

4、客户端以Packet为单位接收,先在本地缓存,然后写入目标文件。

HDFS读数据流程HDFS读数据流程 火成哥哥 发布了50 篇原创文章 · 获赞 51 · 访问量 3万+ 私信 关注
上一篇:Ozone SCM的Pipeline状态转化分析


下一篇:启动Hadoop过程中,没有启动DataNode