hadoop源码解析之hdfs写数据全流程分析---创建文件-CSDN博客

网友收藏2023-10-11 14:35

链接地址：https://blog.csdn.net/zhangjun5965/article/details/74897027
链接标题：hadoop源码解析之hdfs写数据全流程分析---创建文件-CSDN博客
所属网站：blog.csdn.net
被收藏次数：2833

概述DFSClient创建文件namenode创建文件概述hdfs中写数据应该是hdfs中最复杂的业务之一了，hadoop中的每个文件由多个block组成，每个块又有多个备份，这些备份又放在了不同的机器上，所以新建文件的时候会向namenode申请block所在的机器。hdfs中每个block默认情况下是128M，由于每个块比较大，所以在写数据的过程中是把数据块拆分成一个个的数据包以管道的形式

本文地址：https://tebull.com/detail/58224.html

标签：hadoop源码解析之hdfs写数据全流程分析---创建文件