Kerberos (四) --------- 安全集群使用说明

桃扇骨 2024-04-01 13:42 83阅读 0赞

#### 目录 ####

*  一、用户要求
 *  二、访问 HDFS 集群文件
 *   *  1. Shell 命令
     *  2. web 页面
 *  三、提交 MapReduce 任务

--------------------

## 一、用户要求 ##

**1. 具体要求**

以下使用说明均基于普通用户，安全集群对用户有以下要求：

*  集群中的每个节点都需要创建该用户
 *  该用户需要属于hadoop用户组
 *  需要创建该用户对应的Kerberos主体

**2.实操**

此处以 fancy 用户为例，具体操作如下

创建用户 (存在可跳过)，须在所有节点执行

[root@hadoop102 ~]# useradd fancy
    [root@hadoop102 ~]# echo fancy | passwd --stdin fancy
    
    [root@hadoop103 ~]# useradd fancy
    [root@hadoop103 ~]# echo fancy | passwd --stdin fancy
    
    [root@hadoop104 ~]# useradd fancy
    [root@hadoop104 ~]# echo fancy | passwd --stdin fancy

加入 hadoop 组，须在所有节点执行

[root@hadoop102 ~]# usermod -a -G hadoop fancy
    [root@hadoop103 ~]# usermod -a -G hadoop fancy
    [root@hadoop104 ~]# usermod -a -G hadoop fancy

创建主体

[root@hadoop102 ~]# kadmin -p admin/admin -wadmin -q"addprinc -pw fancy fancy"

## 二、访问 HDFS 集群文件 ##

### 1. Shell 命令 ###

**A、认证**

[fancy@hadoop102 ~]$ kinit fancy

**B、查看当前认证用户**

[fancy@hadoop102 ~]$ kinit fancy

**C、执行命令**

[fancy@hadoop102 ~]$ hadoop fs -ls /

**D、注销认证**

[fancy@hadoop102 ~]$ kdestroy

**E、再次执行查看命令**

[fancy@hadoop102 ~]$ hadoop fs -ls /

![在这里插入图片描述][37e6a48d611643e3b48f9f076cbd82d4.png]

### 2. web 页面 ###

**A、安装 Kerberos 客户端**

下载地址：[http://web.mit.edu/kerberos/dist/kfw/4.1/kfw-4.1-amd64.msi][http_web.mit.edu_kerberos_dist_kfw_4.1_kfw-4.1-amd64.msi]　  
下载之后按照提示安装

编辑 C:\\ProgramData\\MIT\\Kerberos5\\krb5.ini 文件，内容如下

[libdefaults]
     dns_lookup_realm = false
     ticket_lifetime = 24h
     forwardable = true
     rdns = false
     default_realm = EXAMPLE.COM
    
    [realms]
     EXAMPLE.COM = {
        
      kdc = hadoop102
      admin_server = hadoop102
     }
    
    [domain_realm]

**B、配置火狐浏览器**

打开浏览器，在地址栏输入 “about:config” ，点击回车

![在这里插入图片描述][77117c56e527480d8ca6c2896164feb6.png]

搜索 “network.negotiate-auth.trusted-uris” ，修改值为要访问的主机名(hadoop102)

![在这里插入图片描述][76d86b264e194c4487feaf01690b83d9.png]  
搜索 “network.auth.use-sspi”，双击将值变为 false

![在这里插入图片描述][25a405a9fcc642238a141bb2cfea2f8a.png]  
**C、认证**

启动 Kerberos 客户端，点击 Get Ticket

![在这里插入图片描述][57a1b2c742b54d0ca522a46e06f5ef10.png]

输入主体名和密码，点击OK

![在这里插入图片描述][2ab53bc655b8423f996d5e1f00ace1e2.png]  
认证成功

![在这里插入图片描述][7bf90f1f25814d419a1d3a9689bc0c9c.png]  
**D、访问 HDFS**

![在这里插入图片描述][e5c6763abb104b83ae2794dcfddbd2fc.png]  
**E、注销认证**

![在这里插入图片描述][726ad17668534f9794491a91f3b87aa4.png]  
**F、重启浏览器，再次访问HDFS**

![在这里插入图片描述][93115443ab954cae9f7f0bf8d3c798a1.png]

## 三、提交 MapReduce 任务 ##

**A、认证**

[fancy@hadoop102 ~]$ kinit fancy

**B、提交任务**

[fancy@hadoop102 ~]$ hadoop jar /opt/module/hadoop-3.1.3/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar pi 1 1

[37e6a48d611643e3b48f9f076cbd82d4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/3ce1bd2d98484646b7e198fba83e529f.png
[http_web.mit.edu_kerberos_dist_kfw_4.1_kfw-4.1-amd64.msi]: http://web.mit.edu/kerberos/dist/kfw/4.1/kfw-4.1-amd64.msi
[77117c56e527480d8ca6c2896164feb6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/65dbdc9df2f14beebcfa6ff09e1612bc.png
[76d86b264e194c4487feaf01690b83d9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/209468f397964a38a46d5d8332271b7b.png
[25a405a9fcc642238a141bb2cfea2f8a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/28a7f64b547341dd9d6c64831babdb47.png
[57a1b2c742b54d0ca522a46e06f5ef10.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/38a825594e604628978e1b19fa78c51b.png
[2ab53bc655b8423f996d5e1f00ace1e2.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/a85eada22ea94a91b44b26b75b342c73.png
[7bf90f1f25814d419a1d3a9689bc0c9c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/35f62923bc814eccacf2f2688f797217.png
[e5c6763abb104b83ae2794dcfddbd2fc.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/5fb6b825f9894f12b777b84d3f3a38e7.png
[726ad17668534f9794491a91f3b87aa4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/d57cb7eb40a74493a8f4964d2a007094.png
[93115443ab954cae9f7f0bf8d3c798a1.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/b78d421daf8b4c00b36757a029573117.png