快速导出hive表结构脚本

电玩女神 2022-03-18 01:23 372阅读 0赞

**传入hive database参数：**

#!/bin/bash
    DATABASE=$1
    hive -e "use ${DATABASE};"
    hive -e "show tables;" > ${DATABASE}tables.txt
        cat tables.txt | while read eachline
        do
            hive -e "show create table ${eachline};" >> ${DATABASE}-tables.txt
            echo >> ${DATABASE}-tables.txt
        done

循环遍历所有database：

#!/bin/bash
    databases='default final first init result'
    for DATABASE in ${databases}
    do
    hive -e "use ${DATABASE};"
    hive -e "show tables;" > ${DATABASE}tables.txt
        cat ${DATABASE}tables.txt | while read eachline
        do
            hive -e "show create table ${eachline};" >> ${DATABASE}-tables.txt
            echo >> ${DATABASE}-tables.txt
        done
    done

刚发现，上面的脚本导出的每个库里的hive表名和表结构都是重复，这是因为两个hive -e之间没有关联性，hive -e 只适合短语句。

使用 hive -f 可实现快速导出hive表结构。

hive.sh
    
    DATABASES='dcl ddl default'
    for databases in ${DATABASES}
    do
    hive -hiveconf database=${databases} -S -f  list_tables.sql > ${databases}_tables_name.txt
        cat ${databases}_tables_name.txt | while read eachline
        do
            hive -hiveconf database=${databases} -hiveconf table=${eachline} -S -f show_create.sql >> ${databases}_tables_structure.txt
            echo >> ${databases}_tables_structure.txt
        done
    done

list\_tables.sql

use ${hiveconf:database};
        show tables;
        show_create.sql
        
        use ${hiveconf:database};
    
    show create table ${hiveconf:table};

--------------------

作者：Useful丶M  
来源：CSDN  
原文：[https://blog.csdn.net/qq\_28178971/article/details/73896666][https_blog.csdn.net_qq_28178971_article_details_73896666]  
版权声明：本文为博主原创文章，转载请附上博文链接！

[https_blog.csdn.net_qq_28178971_article_details_73896666]: https://blog.csdn.net/qq_28178971/article/details/73896666