hive表操作

淩亂°似流年 2024-04-18 19:39 80阅读 0赞

1、创建管理表，hive会自动增加两个表属性，最后修改表的用户名和最后修改表的时间。

hive> create table if not exists mydb.employees(
     name          string comment 'name'
     salary        float comment 'salary'
     subname       array<string>  comment 'subname'
     deduc         map<string,float>  comment 'deduc'
     address       struct<street:string,city:string>  comment 'address' 
    )
    comment 'mytable'
    tblproperties('creator'='me','created_at'='2019-08026')
    location '/user/hive/warehouse/mydb.db/employees';

2、拷贝管理表,只拷贝表结构，包含位置，但不拷贝数据

create table if not exists mydb.employees2 like mydb.employees;

3、创建外部表，对于外部表，hive并非完全拥有这份数据，删除该表并不会删除掉这份数据，不过描述表的元数据信息会被删除掉

create external table if not exists stocks (
        exchange  string,
        symbol    string,
        price     float)
    row format delimited fields terminated by ','
    location '/data/stocks';

4、拷贝外部表

create external table if not exists mydb.employees3 
    like mydb.employees
    location '/path/to/data';

5、创建管理分区表,其中 country,state 为分区字段

create table employees (
        name      string,
        salary    float   )
    partitioned by (country string,state string) ;

6、创建外部分区表

create external table if not exists log_messages (
        hms int,
        server  string
    )
    partitioned by (year int,month int,day int)
    row format delimited fields terminated by '\t';

7、删除表

hive>drop table if exists employees;

8、修改表

hive>alter table log_messages rename to logmsgs; --表重命名
    hive>alter table log_messages change colunm hms hours_minutes_seconds int
    comment 'the hours' after severity; --修改列信息，降该列放在severity字段之后，after 可替换为first
    hive>alter table log_messages add columns(
        app_name string comment 'app name',
        session_id  long comment 'session_id'); --增加列
    hive>alter table log_messages replace columns(
        app_name string comment 'app name',
        session_id  long comment 'session_id'); --替换列
        
    hive>alter table log_messages set tblproperties(
        'notes'= 'the process id is no longer captured;this colunm is always NULL');
    ); --修改表属性，可以增加或修改表属性，但无法删除属性

9、修改表分区

hive>alter table log_messages add if not exists 
    partition (year = 2011,month = 1,day = 1) 
    location 'logs/2011/01/01' ; --表增加分区
    hive>alter table log_messages
    partition (year = 2011,month = 1,day = 1) 
    set location 's3n://ourbucket/logs/2011/01/01' ; --表修改分区路径，不会删除数据，也不会转移数据
    hive>alter table log_messages drop if exists 
    partition (year = 2011,month = 1,day = 1) ； --表删除分区