轻松入门大数据第11章入门到进阶：如何快速学会Hive调优 11.1 Hive调优 11.1.1 Hive调优概述

小咪咪 2024-03-16 12:11 50阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第11章 入门到进阶：如何快速学会Hive调优
         *   *  11.1 Hive调优
             *   *  11.1.1 Hive调优概述

![在这里插入图片描述][f81cac48a74a4daa979846fd96df088c.png_pic_center]

#### 第11章 入门到进阶：如何快速学会Hive调优 ####

##### 11.1 Hive调优 #####

> 1.  抓取策略
> 2.  严格模式
> 3.  本地模式
> 4.  排序
> 5.  推测执行
> 6.  Mapper和Reducer个数设置
> 7.  数据倾斜

###### 11.1.1 Hive调优概述 ######

Hive 调优【非常重要】\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*

*  基本篇
 *  实战篇（项目部分）

调优：生产上 很多的作业是需要经过调优【根据一定的场景来的】

![在这里插入图片描述][b14883a59fe24c65ae0522588bdd6daf.png_pic_center]

官网文档：[https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties][https_cwiki.apache.org_confluence_display_Hive_Configuration_Properties]

![在这里插入图片描述][8f2f5b4a24f44b318d2d2164415d71f4.png_pic_center]

这里面有很多属性可以控制我们MR 作业以及Hive 性能。

[f81cac48a74a4daa979846fd96df088c.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/8a7bde474d714ecd9ea4d8a5bf69e6f9.png
[b14883a59fe24c65ae0522588bdd6daf.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/8c8471a5395d4d988252bf12f7b32ece.png
[https_cwiki.apache.org_confluence_display_Hive_Configuration_Properties]: https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties
[8f2f5b4a24f44b318d2d2164415d71f4.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/8d0eae9fe63e43f9a6b33ad660b5e960.png