【dbeaver】win环境的kerberos认证和Clouders集群中Kerberos认证使用Dbeaver连接Hive和Phoenix

Bertha 。 2024-03-01 08:04 56阅读 0赞

### 一、下载驱动 ###

cloudera官网

#### 1.1 官网页面下载 ####

[下载页面][Link 1] 的Database Drivers 挑选比较新的版本即可。  
![在这里插入图片描述][72ff95927616436083fccba87620d66e.png]

#### 1.2 集群下载 ####

Hive可能集群没有驱动包。驱动包名称：`HiveJDBC42.jar`。41结尾的包也可以使用的。注意Jar包的大小一定是十几MB的。几百KB的是thin包不可用。  
![在这里插入图片描述][326402206ac345019e891287cf8abf77.png]  
如下的jar是不可用的。

[root@mycentosprod lib]# ll -h | grep jdbc
    -rw-r--r-- 1 root root  116K 9月   9 2021 hive-jdbc-2.1.1-cdh6.2.0.jar

Phoenix 包名称：`phoenix-5.0.0-cdh6.2.0-client.jar`

-sh-4.2$ ll -h | grep client
    -rw-r--r--. 1 root root 137M Dec 22  2022 phoenix-5.0.0-cdh6.2.0-client.jar

### 二、Hive连接（cache方式） ###

#### 2.1 下载安装MIT KERBEROS客户端 ####

[MIT KERBEROS][] 下载较新的版本即可。  
![在这里插入图片描述][9c6a184a3c344aaa969ca254adc04503.png]  
下载之后一路默认安装即可。`注意：不要修改软件安装位置。`  
修改系统环境变量中的Path。将刚刚的安装路径置顶。（不置顶，也要比`%JAVA_HOME%\bin`和`anaconda`相关的高）  
![在这里插入图片描述][d5999b64303d4311a5d7c191ddb19f29.png]  
使用CMD命令确认下：  
![在这里插入图片描述][7212873675354dddb32b4669aa4dcf33.png]

#### 3.2 修改`krb5.conf`文件并创建`krb5.ini`配置文件 ####

krb5.conf 一般存储在集群的`/etc`目录下。  
其中conf文件中仅需要保留一下三大项中的内容即可。如果有此项`renew_lifetime = 1800d`需要删除或注释(行首添加`#`)

[libdefaults]
    ... ...
    [realms]
    ... ...
    [domain_realm]
    ... ...

将`krb5.conf`复制一份并改名为`krb5.ini`即可。`krb5.ini`是供MIT KERBEROS软件使用的。  
修改添加环境变量：  
`如下两个位置最好不要自定义，都在默认的MIT KERBEROS位置即可。避免不必要的麻烦。`  
![在这里插入图片描述][f29f34c87a194454b29de61866b066e8.png]  
`KRB5CCNAME`是MIT KERBEROS软件自动创建的。

#### 2.2 本地认证kerberos ####

向管理员索取Keytab文件。  
打开打开keytab所在位置。按住shift点击右键点击`open cmd windos here`，打开CMD窗口。  
![在这里插入图片描述][e50c9607d3234555be1b819fe28d271e.png]

# 获取pricipal
    klist -kt xxx.keytab
    # 认证授权
    kinit -kt xxx.keytab xxx@XXXXX.COM
    # 验证下
    klist

验证结果：  
![在这里插入图片描述][57dde0856314422994617947f8aec5c9.png]  
同时MIT KERBEROS软件也会获取到成功的结果：  
![在这里插入图片描述][3c563d8d83ae4c8a85e8a08e9d448e75.png]

#### 2.3 编辑驱动 ####

![在这里插入图片描述][9f82b57dc7064e0faf7221ab49fdc909.png]

#### 2.5 编辑URL链接模板 ####

![在这里插入图片描述][26c81652270d4d678460c55043c7c8ad.png]

![在这里插入图片描述][2ad6d9888b384c2c97ec1ff7192252e6.png]  
![在这里插入图片描述][a985ac871ccd4c9380b62822e084ca42.png]  
驱动URL链接模板

-- 注意：KrbAuthType=2;AuthMech=1 是固定的。
    jdbc:hive2://{host}[:{port}][/{database}];KrbRealm=XXXXX.COM;KrbHostFQDN={host};KrbServiceName=hive;KrbAuthType=2;AuthMech=1

#### 2.6 测试 ####

![在这里插入图片描述][f5cc43d748d14152bb016891603c9b37.png]  
![在这里插入图片描述][b3870d7e30714038a9b920e1b2bfbd49.png]

### 三、Phoenix连接 ###

#### 3.1 编写`jass.conf` ####

Client {
      com.sun.security.auth.module.Krb5LoginModule required
      useKeyTab=true
      storeKey=true
      useTicketCache=false
      keyTab="D:/xxx/xxx.keytab"
      principal="xxx@XXXXX.COM";
    };
    com.sun.security.jgss.krb5.initiate {
      com.sun.security.auth.module.Krb5LoginModule required
      renewTGT=false
      doNotPrompt=true
      useKeyTab=true
      keyTab="D:/env/Kerberos/xxx.keytabs"
      principal="xxx@XXXXX.COM"
      storeKey=true
      useTicketCache=false;
    };

#### 3.3 修改dbeaver.ini ####

打开dbeaver安装目录，找到dbeaver.ini文件进行编辑，追添加如下内容

-Djavax.security.auth.useSubjectCredsOnly=false
    -Djava.security.krb5.conf=D:\xxx\krb5.conf
    -Dsun.security.krb5.debug=true
    -Djava.security.auth.login.config=‪‪D:\xxx\jaas.conf

#### 3.4 获取集群配置文件 ####

（1）hadoop的`hdfs-site.xml`和`core-site.xml`配置文件  
（2）hbase的`hbase-site.xml`  
使用压缩工具(如360压缩)打开`phoenix-5.0.0-cdh6.2.0-client.jar`，将以上三个配置文件拖入空白处，即自动保存。

#### 3.5 配置驱动 ####

![在这里插入图片描述][7e18d1e0b2ba4bee89b86cddc79ed2a3.png]

#### 3.6 编辑驱动URL链接模板 ####

![在这里插入图片描述][5657661a128b49c49dfd958351b9a396.png]  
路径可以在`hbase-site.xml`中获取

<property>
          <name>zookeeper.znode.parent</name>
          <value>/hbase-secure</value>
        </property>

#### 3.7 测试 ####

![在这里插入图片描述][01546d6843fa4d94966baef46607b61a.png]  
![在这里插入图片描述][2989c4f29caa42d599028e2098dc3349.png]

### 四、参考连接： ###

[DBeaver连接phoenix][DBeaver_phoenix]  
[Kerberos环境下使用Dbeaver链接Phoenix][Kerberos_Dbeaver_Phoenix]  
[Windows下Dbeaver连接设置Kerberos后的Hive和Phoenix][Windows_Dbeaver_Kerberos_Hive_Phoenix]

[Link 1]: https://www.cloudera.com/downloads.html
[72ff95927616436083fccba87620d66e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/44325d6b41ad48bba0f4196df90f35d7.png
[326402206ac345019e891287cf8abf77.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/b335f46155b849bb9164cd2027905ef4.png
[MIT KERBEROS]: https://web.mit.edu/kerberos/
[9c6a184a3c344aaa969ca254adc04503.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/f4155b69f36e4068ac55009d5a59c647.png
[d5999b64303d4311a5d7c191ddb19f29.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/d37a0d441234482e9db7ed1b9106cfc0.png
[7212873675354dddb32b4669aa4dcf33.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/77099c551099488ab677de2930f8d7a7.png
[f29f34c87a194454b29de61866b066e8.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/c60e8fcea21846a2960efb88d73e16c5.png
[e50c9607d3234555be1b819fe28d271e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/7004fb7e682c4dc4b6a15064f936fa02.png
[57dde0856314422994617947f8aec5c9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/e1ed82824a8e4e6ebdc65e78d00823a5.png
[3c563d8d83ae4c8a85e8a08e9d448e75.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/1c33e1463e4a4c049adf960c6d925ac6.png
[9f82b57dc7064e0faf7221ab49fdc909.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/e1f8e38507884f2a9fed4abe601c39fe.png
[26c81652270d4d678460c55043c7c8ad.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/b99aab514ad54346aea2b8a34f68e227.png
[2ad6d9888b384c2c97ec1ff7192252e6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/25abdba95cd448519f50c5517e457ed9.png
[a985ac871ccd4c9380b62822e084ca42.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/ee4e14855ecb4c6c97aec23269ebf49a.png
[f5cc43d748d14152bb016891603c9b37.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/b1bc68c085da45bea6d07d192109930f.png
[b3870d7e30714038a9b920e1b2bfbd49.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/860edd9770ac4c3e8a9c67b868f62ebf.png
[7e18d1e0b2ba4bee89b86cddc79ed2a3.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/ee0f970ab76247778a9b1d94c7b25e1f.png
[5657661a128b49c49dfd958351b9a396.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/dc6ce0f7e50240cca76beb5e6bcfee40.png
[01546d6843fa4d94966baef46607b61a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/709e2a02df034874aebb6dc22fb879c8.png
[2989c4f29caa42d599028e2098dc3349.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/01/4eedc594156d4d52806733352ff5a55b.png
[DBeaver_phoenix]: https://blog.csdn.net/weixin_40991044/article/details/96863620
[Kerberos_Dbeaver_Phoenix]: https://blog.csdn.net/Dreamershi/article/details/120025837
[Windows_Dbeaver_Kerberos_Hive_Phoenix]: https://www.psvmc.cn/article/2023-08-10-kerberos-dbeaver.html