轻松入门大数据第3章入门到进阶：系统玩转分布式文件系统HDFS 3.1 Hadoop之HDFS 3.1.5 文件系统命名空间

忘是亡心i 2024-03-22 16:11 41阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第3章 入门到进阶：系统玩转分布式文件系统HDFS
         *   *  3.1 Hadoop之HDFS
             *   *  3.1.5 文件系统命名空间
                 *   *  The File System Namespace

![在这里插入图片描述][217fe44b806946379f13323fb81689d2.png_pic_center]

#### 第3章 入门到进阶：系统玩转分布式文件系统HDFS ####

##### 3.1 Hadoop之HDFS #####

> 1.  初识HDFS
> 2.  HDFS假设和目标
> 3.  HDFS架构
> 4.  文件系统命名空间
> 5.  副本
> 6.  HDFS优缺点
> 7.  单节点HDFS部署
> 8.  HDFS命令行使用
> 9.  HDFS Java API使用
> 10. HDFS读写数据流程
> 11. 工作机制
> 12. 安全模式

###### 3.1.5 文件系统命名空间 ######

###### The File System Namespace ######

HDFS 支持传统的**分层**文件组织【就像我们的C、D… 盘符下去】。用户或应用程序可以创建目录并在这些目录中存储文件。

文件系统命名空间层次结构与大多数其他现有文件系统相似；可以创建和删除文件，将文件从一个目录移动到另一个目录，或重命名文件。HDFS 支持用户配额和访问权限。HDFS 不支持硬链接和软链接【Windows快捷方式、Linux 软硬链接… HDFS 不支持】。但是，HDFS 体系结构并不排除实现这些功能。

虽然 HDFS 遵循FileSystem 的命名约定，但保留了一些路径和名称（例如/.reserved和）。透明加密和快照.snapshot等功能使用保留路径。

NameNode 维护文件系统命名空间。对文件系统命名空间或其属性的任何更改都由 NameNode 记录。应用程序可以指定应由 HDFS 维护的文件的副本数。文件的副本数称为该文件的副本因子(又叫副本系数)。此信息由 NameNode 存储。

![在这里插入图片描述][05a605aa350e4adaa2572cb05579f61d.png_pic_center]

副本系数怎么理解：

我们之前说到一个东西，如果块大小是 10M，那么15M 的文件就会拆成两个块(10M + 5M )

如果没有副本，这两个块直接放在两台不同的机器上，如果这时候，一个机器挂了，那么数据就丢了… 而且无法恢复。

所以副本系数的概念就来了

还是上面的栗子15M 的文件两个块，如果副本系数是3，那么每个块都会存3 份。这样就算有一台机器挂掉了， 还可以读另外机器的

副本系数又叫副本因子，我们马上就会讲到，这个是我们可以进行修改的

> 副本系数存储在NN 中

[217fe44b806946379f13323fb81689d2.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/f5b29b649ef641cba4c90308c90cec48.png
[05a605aa350e4adaa2572cb05579f61d.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/780a78df7d464da9a5966fa404c15cb6.png