Hive的安装以及配置

阳光穿透心脏的1/2处 2022-12-02 01:18 210阅读 0赞

## 1、准备 ##

先启动hadoop或hadoop-ha  
将hive-1.1.0-cdh5.14.2.tar.gz解压至目标目录，并改名为hive110  
修改hive110目录的权限： chown -R root:root hive110  
安装mysql  
准备mysql连接java的驱动包

## 2、配置 ##

进入hive的conf目录下  
我这里是`/opt/bigdata/hadoop/hive110/conf`  
新建hive-site.xml文件  
然后编辑`vi hive-site.xml`  
其中xxx.xxx.xxx.xxx是虚拟机的ip地址

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
    <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
    <configuration>
      <property>
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://xxx.xxx.xxx.xxx:3306/hive110?createDatabaseIfNotExist=true</value>
      </property>
      <property>
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
      </property>
      <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>root</value>
      </property>
      
      <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>root</value>
      </property>
      <property>
        <name>hive.server2.thrift.client.user</name>
        <value>root</value>
      </property>
      <property>
        <name>hive.server2.thrift.client.password</name>
        <value>root</value>
      </property>
      <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/opt/bigdata/hadoop/hive110/warehouse</value>
      </property>
    </configuration>

将mysql-java驱动拷贝到 hive110/lib中

cp /opt/install/hadoop/mysql-connector-java-5.1.38.jar /opt/bigdata/hadoop/hive110

添加hive环境变量  
`vi /etc/profile`  
添加 hive的目录  
`export HIVE_HOME=/opt/bigdata/hive110 export PATH=$PATH:$HIVE_HOME/bin`在这里插入代码片\`

初始化hive：进入hive的bin目录，执行以下命令  
`./schematool -dbType mysql -initSchema`

如果初始化失败，可以登录mysql给当前用户授权

select user,host from mysql.user;
    grant all on *.* to root@'%' identified by 'root';
    flush privileges;

## 3、hive的启动 ##

进入hive的bin目录下，前台启动hive：`./hive`  
后台启动hiveserver2：`nohup hiveserver2 >/dev/null 2>&1 &`  
xxx.xxx.xxx.xxx依旧是该虚拟机的IP地址  
beeline 连接mysql：`beeline -u jdbc:hive2://xxx.xxx.xxx.xxx:10000`

## 4、杂项 ##

通过hive连接mysql后执行命令会在控制台输出大量的日志信息，造成干扰。  
可以临时取消这些日志信息的输出，但是重启之后就又会在控制台输出  
临时取消输出的命令如下：`set hive.server2.logging.operation.level=NONE;`  
也可以永久配置让其不输出：

<property>
    	<name>hive.server2.logging.operation.enabled</name>
    	<value>true</value>
    </property>
    <property>
    	<name>hive.server2.logging.operation.level</name>
    	<value>NONE</value>
    </property>
    <property>
    	<name>hive.server2.logging.operation.log.location</name>
    	<value>/opt/bigdata/hadoop/hive110/oprlog</value>
    </property>

hive的日志查看：`/tmp/运行用户名(一般为root)/hive.log`  
在root用户下就是：`/tmp/root下的hivelog`