Hive入门系列(2)-Hive常用配置

r囧r小猫 2023-10-10 12:16 18阅读 0赞

### 配置Mysql存储元数据 ###

元数据默认存储在自带的 derby 数据库中，每次只能有一个内嵌的Derby数据块可以访问数据文件，这就意味着一次只能为metastore打开一次hive会话，推荐使用 MySQL 存储 Metastore。

# 下载
    cd /opt/soft/
    wget https://mirrors.bfsu.edu.cn/apache/hive/hive-2.3.7/apache-hive-2.3.7-bin.tar.gz
    # 安装
    tar -zxvf apache-hive-2.3.7-bin.tar.gz
    mv apache-hive-2.3.7-bin hive-2.3.7
    # 添加环境变量
    vim /etc/profile
    # HIVE_HOME
    export HIVE_HOME=/opt/soft/hive-2.3.7
    export PATH=$PATH:$HIVE_HOME/bin
    # 上传mysql-connector-java-5.1.27-bin.jar到/opt/soft/hive-2.3.7/lib目录下
    # 编写配置
    cd /opt/soft/hive-2.3.7/conf
    vi hive-site.xml
    # 添加
    <?xml version="1.0"?>
    <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
    <configuration>
    	
    	<property>
    	    <name>javax.jdo.option.ConnectionURL</name>
    	    <value>jdbc:mysql://192.168.1.240:3306/metastore?createDatabaseIfNotExist=true</value>
    	    <description>JDBC connect string for a JDBC metastore</description>
    	</property>
    	
    	<property>
    	    <name>javax.jdo.option.ConnectionDriverName</name>
    	    <value>com.mysql.jdbc.Driver</value>
    	    <description>Driver class name for a JDBC metastore</description>
    	</property>
    	
    	<property>
    	    <name>javax.jdo.option.ConnectionUserName</name>
    	    <value>root</value>
    	    <description>username to use against metastore database</description>
    	</property>
    	
    	<property>
    	    <name>javax.jdo.option.ConnectionPassword</name>
    	    <value>123456</value>
    	    <description>password to use against metastore database</description>
    	</property>
        
     	<property>
     		<name>hive.metastore.schema.verification</name>
     		<value>false</value>
    	</property>
    	
     	<property>
    		<name>hive.metastore.event.db.notification.api.auth</name>
     	<value>false</value>
     	</property>
     	
     	<property>
     		<name>hive.metastore.warehouse.dir</name>
     		<value>/user/hive/house</value>
     	</property>
    </configuration>
    # 初始化数据库，完成后可在数据库查看已创建了数据库metastore和很多表
    schematool -initSchema -dbType mysql -verbose
    # 启动hive
    bin/hive

![在这里插入图片描述][20210106182256292.png]

### 开启元数据远程服务 ###

开启元数据远程服务，方便第三方链接hive进行访问。

# 
    vim /opt/soft/hive-2.3.7/conf/hive-site.xml 
    # 添加
            
            <property>
                    <name>hive.metastore.uris</name>
                    <value>thrift://hadoop001:9083</value>
            </property>
    # 启动
    nohup hive --service metastore 2>&1 &
    #

![在这里插入图片描述][20210106192408336.png]

### 配置日志目录 ###

Hive 的 log 默认存放在/tmp/用户/hive.log 目录下。

#
    cd  /opt/soft/hive-2.3.7/conf/
    mv hive-log4j2.properties.template hive-log4j2.properties
    # 修改日志目录
    vim  hive-log4j2.properties
    # 修改内容
    property.hive.log.dir = /opt/soft/hive-2.3.7/logs

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzNDM3ODc0_size_16_color_FFFFFF_t_70]

### 配置打印当前库和表头 ###

vim /opt/soft/hive-2.3.7/conf/hive-site.xml
    # 添加
            <property>
                    <name>hive.cli.print.header</name>
                    <value>true</value>
            </property>
            <property>
                    <name>hive.cli.print.current.db</name>
                    <value>true</value>
            </property>

![在这里插入图片描述][2021010619583325.png]

[20210106182256292.png]: https://img-blog.csdnimg.cn/20210106182256292.png
[20210106192408336.png]: https://img-blog.csdnimg.cn/20210106192408336.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzNDM3ODc0_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20210106195058500.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQzNDM3ODc0,size_16,color_FFFFFF,t_70
[2021010619583325.png]: https://img-blog.csdnimg.cn/2021010619583325.png