【JMeter-Hive】使用JMeter对Hive的查询性能进行压测

本是古典何须时尚 2023-10-08 19:32 26阅读 0赞

#### 【JMeter-Hive】使用JMeter对Hive的查询性能进行压测 ####

*  1）生成测试数据
 *  2）查询性能压测
 *   *  2.1.创建线程用户并指定参数配置
     *  2.2.创建JDBC Connection Configuration并配置连接信息
     *  2.3.导入Hive相关jar包
     *  2.4.创建JDBC Request取样器并添加需要测试的SQL
     *  2.5.添加所需要的监听器
     *  2.6.开始测试

## 1）生成测试数据 ##

对Hive的查询性能进行压测需要我们提前准备好测试数据。

数据生成教程：[使用hive-testbench生成Hive测试数据][hive-testbench_Hive]

## 2）查询性能压测 ##

测试工具JMeter的安装链接：[【JMeter-JMeter的安装】压测工具Apache-JMeter的安装：Windows & Linux][JMeter-JMeter_Apache-JMeter_Windows _ Linux]

### 2.1.创建线程用户并指定参数配置 ###

参数说明：

*  立即停止测试：调度器内达到规定时间立即停止测试
 *  线程数：开启多少并发（如：20、50、100，依次增大）
 *  循环次数：规定时间内循环次数
 *  调度器：本次测试任务的时间调度
 *  持续时间：测试时间

![在这里插入图片描述][04590a10e14c450ba887f246d286cbce.png]

![在这里插入图片描述][4a144925ed794faba126f6da77d6dea3.png]

### 2.2.创建JDBC Connection Configuration并配置连接信息 ###

参数说明：

*  Variable Name for created pool：创建的连接池名称，需要与后面JDBC Request中保持一致
 *  Database URL：Hive数据库连接URL
 *  JDBC Driver class：Hive连接驱动，使用`org.apache.hive.jdbc.HiveDriver`即可
 *  Username：Hive数据库用户名
 *  Password：Hive数据库密码

![在这里插入图片描述][5153fdb8e3de4706a824315698afeafc.png]

![在这里插入图片描述][483d56b3c14b440fab0b1d7bd54ee6a0.png]

### 2.3.导入Hive相关jar包 ###

注意：

Hive的连接驱动JMeter自身没有集成，需要我们自行添加，否则就会出现找不到驱动的异常。

提供下载链接：[驱动所需jar包地址][jar]

提取码：xfra

将所有jar包放入到`JMeter`的`lib`路径下，如果有重复的就跳过添加。

### 2.4.创建JDBC Request取样器并添加需要测试的SQL ###

hive-testbench为我们准备了99个sql测试语句：[hive-testbench的99个sql测试语句][hive-testbench_99_sql]

![在这里插入图片描述][552b40981d7e4c6cae2a35877c21b02b.png]  
![在这里插入图片描述][2b2048147a324b96aca3ab945e18b1f0.png]

### 2.5.添加所需要的监听器 ###

![在这里插入图片描述][41e22de8a7a34df888c76622bfb589cf.png]

这里选取几个常用的监听器进行举例，其中响应时间单位均为`毫秒`

*  查询结果树：
    
    ![在这里插入图片描述][c1bef3d3f81d4ee48da001d27a450a54.png]
 *  汇总报告：
    
    ![在这里插入图片描述][5daf796fdd0f41bd8a8d200ad973106b.png]
 *  聚合报告：
    
    ![在这里插入图片描述][5151ff3fa2064781a36a1ad8c7cd0c85.png]

### 2.6.开始测试 ###

![在这里插入图片描述][a793ff77027d48f7933586ef9986c2e0.png]

[hive-testbench_Hive]: https://blog.csdn.net/weixin_53543905/article/details/129459922?spm=1001.2014.3001.5501
[JMeter-JMeter_Apache-JMeter_Windows _ Linux]: https://blog.csdn.net/weixin_53543905/article/details/129408329?spm=1001.2014.3001.5502
[04590a10e14c450ba887f246d286cbce.png]: https://img-blog.csdnimg.cn/04590a10e14c450ba887f246d286cbce.png
[4a144925ed794faba126f6da77d6dea3.png]: https://img-blog.csdnimg.cn/4a144925ed794faba126f6da77d6dea3.png
[5153fdb8e3de4706a824315698afeafc.png]: https://img-blog.csdnimg.cn/5153fdb8e3de4706a824315698afeafc.png
[483d56b3c14b440fab0b1d7bd54ee6a0.png]: https://img-blog.csdnimg.cn/483d56b3c14b440fab0b1d7bd54ee6a0.png
[jar]: https://pan.baidu.com/s/1l2Ahx6178Oble8jEHBwUDg
[hive-testbench_99_sql]: https://github.com/hortonworks/hive-testbench/tree/hdp3/sample-queries-tpcds
[552b40981d7e4c6cae2a35877c21b02b.png]: https://img-blog.csdnimg.cn/552b40981d7e4c6cae2a35877c21b02b.png
[2b2048147a324b96aca3ab945e18b1f0.png]: https://img-blog.csdnimg.cn/2b2048147a324b96aca3ab945e18b1f0.png
[41e22de8a7a34df888c76622bfb589cf.png]: https://img-blog.csdnimg.cn/41e22de8a7a34df888c76622bfb589cf.png
[c1bef3d3f81d4ee48da001d27a450a54.png]: https://img-blog.csdnimg.cn/c1bef3d3f81d4ee48da001d27a450a54.png
[5daf796fdd0f41bd8a8d200ad973106b.png]: https://img-blog.csdnimg.cn/5daf796fdd0f41bd8a8d200ad973106b.png
[5151ff3fa2064781a36a1ad8c7cd0c85.png]: https://img-blog.csdnimg.cn/5151ff3fa2064781a36a1ad8c7cd0c85.png
[a793ff77027d48f7933586ef9986c2e0.png]: https://img-blog.csdnimg.cn/a793ff77027d48f7933586ef9986c2e0.png