Hive 数据库设计中的拉链表、增量表、全量表

╰+攻爆jí腚メ 2023-02-25 15:22 15阅读 0赞

hive 数据库设计中的拉链表、增量表、全量表\_侯风飞的博客 - CSDN 博客\_增量表

**1)       存量、流量、增量**

**（1）存量：系统在某一时点时的所保有的数量；  
（2）流量：是指在某一段时间内流入 / 出系统的数量  
（3）增量：则是指在某一段时间内系统中保有数量的变化  
（4）增量 = 流入量 -- 流出量  
（5）本期期末存量 = 上期期末存量 + 本期内增量**

**2)       拉链表：注意事项  
（1）记录一个事物从开始，一直到当前状态的所有变化的信息；  
（2）拉链表每次上报的都是历史记录的最终状态，是记录在当前时刻的历史总量；  
（3）当前记录存的是当前时间之前的所有历史记录的最后变化量（总量）；  
（4）存量是在某一时刻的总量；  
（5）存量一般设计成拉链表（月报 - 常用、日报）；  
（6）流量和存量的区别：流量是增量；存量是总量；  
（7）封链时间可以是 2999，3000，9999 等等比较大的年份；拉链表到期数据要报 0；  
（8）拉链表和增量表的共同点：表结构基本一样。**

**3)       拉链表：例子详解**

**![format_png][]**

**![format_png 1][]**

**4)       增量表：注意事项  
（1）记录每次增加的量，而不是总量；  
（2）流量是指在一定时间内的增量；  
（3）流量一般设计成增量表（日报 - 常用、月报）；  
（4）流量和存量的区别：流量是增量；存量是总量；  
（5）增量表，只报变化量，无变化不用报**

**5)       增量表：例子详解（增量表只有上报时间，开始时间更改为上报时间）**

**![format_png 2][]**

**6)       全量表：注意事项  
（1）全量表，有无变化，都要报  
（2）每次上报的数据都是所有的数据（变化的 + 没有变化的）**

**7)       全量表：例子详解（全量表只有上报时间，开始时间更改为上报时间）**

**![format_png 3][]**

[format_png]: /images/20230209/456caaf1a0494d738707b457e9588e5f.png
[format_png 1]: /images/20230209/3ab0b2a6d8a64c499e656b006f81222b.png
[format_png 2]: /images/20230209/8b0f7a5ed1fd4a8cb1607156129cbd48.png
[format_png 3]: /images/20230209/03cfb51962b24d2bad8c9a468b9a5934.png