网站首页
手机版

hdfs的读写流程 快来看看

更新时间:2022-05-12 05:49:36作者:未知

hdfs的读写流程 快来看看

1、客户端向NameNode发出写文件请求。检查是否已存在文件、检查权限。若通过检查,直接先将操作写入EditLog,并返回输出流对象。

2、client端按128MB的块切分文件。client将NameNode返回的分配的可写的DataNode列表和Data数据一同发送给最近的第一个DataNode节点,此后client端和NameNode分配的多个DataNode构成pipeline管道,client端向输出流对象中写数据。client每向第一个DataNode写入一个packet,这个packet便会直接在pipeline里传给第二个、第三个…DataNode。

3、每个DataNode写完一个块后,会返回确认信息。

4、写完数据,关闭输输出流。发送完成信号给NameNode。

本文标签: hdfs的读写流程  

为您推荐

湖里区2023年进城务工人员随迁子女小学积分入学办法

湖里区2023年进城务工人员随迁子女小学积分入学办法实施细则公布啦!报名时间:4月17日-4月26日

2023-04-12 17:02

江苏南通教资笔试成绩手机查询入口

2023年上半年中小学教师资格考试(笔试)成绩将于4月13日发布,使用手机也可查询,具体详见正文。

2023-04-12 17:01

襄阳教师资格认定体检医院可以自己选吗?

不能,襄阳及各区县2023年教师资格认定体检都是指定医院,未使用规定体检表、不在指定医院和规定时段内体检无效。

2023-04-12 17:01

2023年新疆普通高考体检工作温馨提示

高考体检工作是普通高校招生工作的重要组成部分,体检结论是考生根据自身身体状况填报高考志愿、高校录取新生的重要依据。

2023-04-12 17:01

湖里区积分入学报名条件是什么(湖里区今年积分入学有多少人)

申请参加湖里区积分入学的随迁子女必须同时符合以下基本条件:随迁子女应年满六周岁,即2016年9月1日至2017年8月31日期间出生;持有居住证等,详见正文

2023-04-12 16:59

宜兴中考满分是多少分(宜兴中考满分是多少分2021)

宜兴市教育局发布2023年宜兴市初中学业水平考试方案,今年中考模式依然为学业考试+学业考查,文化科目考试时间安排在6月16日、17日、18日,升学考试总分共计770分

2023-04-12 16:58