300字范文,内容丰富有趣,生活中的好帮手!
300字范文 > Java大数据-Hadoop-HDFS的读数据流程(原理)

Java大数据-Hadoop-HDFS的读数据流程(原理)

时间:2019-07-11 02:04:43

相关推荐

Java大数据-Hadoop-HDFS的读数据流程(原理)

一、HDFS 读数据流程

(1)客户端通过 DistributedFileSystem 向 NameNode 请求下载文件,NameNode 通过查 询元数据,找到文件块所在的 DataNode 地址。

(2)挑选一台 DataNode(就近原则,然后随机)服务器,请求读取数据。

(3)DataNode 开始传输数据给客户端(从磁盘里面读取数据输入流,以 Packet 为单位 来做校验)。

(4)客户端以 Packet 为单位接收,先在本地缓存,然后写入目标文件。

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。