Postgresql清理WAL日志

╰+哭是因爲堅強的太久メ 2023-05-22 06:49 28阅读 0赞

### 1. 前言 ###

`WAL`是`Write Ahead Log`的简写，和oracle的redo日志类似，存放在`$PGDATA/pg_xlog`中，`10`版本以后在`$PGDATA/pg_wal`目录.  
`WAL`相关的介绍可见[WAL(Write Ahead Logging)介绍][WAL_Write Ahead Logging]

如果开启了归档，在目录`archive_status`下会有一些文件，以`ready`结尾的，表示可以归档但还没有归档，`done`结尾的表示已经归档。

**和`WAL`日志数量相关的几个参数：**

wal_keep_segments = 300          # in logfile segments, 16MB each; 0 disables  
    checkpoint_completion_target = 0.5     # checkpoint target duration, 0.0 - 1.0  
    checkpoint_segments = 2048              # in logfile segments, min 1, 16MB each  
    #9.5以后checkpoint_segments不再使用，要参考设置以下两个参数
    #max_wal_size = 1GB  #最大不超过这个值
    #min_wal_size = 80MB  #最小保留这个值

**如果没有开启归档的情况下：**  
不超过以下两个公式计算得出的个数：

*  `(2 + checkpoint_completion_target) * checkpoint_segments + 1`
 *  或者`checkpoint_segments + wal_keep_segments + 1`

> 9.5以后，如果超过了`max_wal_size`，那么就会删除不需要的`wal`.

如果开启了归档，那么归档成功了，才会被清除，所以这里注意一下，`如果你开启了归档，但是归档命令是失效的，那么wal目录会一直增长，不会自动删除WAL，会使得此目录被撑爆`。

### 2. 什么情况下回自动清理wal ###

1.  做检查点的时候;
2.  数据库启动的时候，或者修改了相关参数后重启数据库。
    
    **触发检查点的情况：**
3.  从前一个检查点发生过后的时间超过checkpoint\_timeout设置的间隔（默认间隔为300秒（5分钟））。
4.  在版本9.4或更早版本中，自上一个检查点以来，超过使用checkpoint\_segments（默认数量为3）设置的WAL段文件数量。
5.  在9.5或更高版本中，pg\_xlog（版本10或更高版本，pg\_wal）中WAL段文件的总大小已超过参数max\_wal\_size的值（默认值为1GB（64个文件））。
6.  PostgreSQL服务在smart和fast模式下停止。
7.  手动执行checkpoint.

### 3. 如何手动清理wal ###

可以通过缩小以上涉及到的函数减少`wal segment`的数量，也可以手动删除，如下：

pg_controldata

Latest checkpoint location: 16/79FF5520
    Latest checkpoint’s REDO location: 16/79FF54E8
    Latest checkpoint’s REDO WAL file: 00000001000000160000001E

这里表示`16/79FF54E8`检查点已经执行，已经包含在`00000001000000160000001E`日志文件中，那么这个日志之前的日志是可以清理的。

可以手动使用系统命令`rm`清理，也可以使用`pg_archivecleanup`清理  
比如：

查看日志
    ll
    total 833M
    -rw------- 1 postgres postgres  64M Aug 29 11:10 00000001000000160000001E
    -rw------- 1 postgres postgres  64M Jul 16 11:24 00000001000000160000001F
    -rw------- 1 postgres postgres  64M Jul 16 11:24 000000010000001600000020
    -rw------- 1 postgres postgres  64M Jul 16 11:25 000000010000001600000021
    -rw------- 1 postgres postgres  64M Jul 16 11:25 000000010000001600000022
    -rw------- 1 postgres postgres  64M Jul 16 11:26 000000010000001600000023
    -rw------- 1 postgres postgres  64M Jul 16 11:24 000000010000001600000024
    -rw------- 1 postgres postgres  64M Jul 16 11:24 000000010000001600000025
    -rw------- 1 postgres postgres  64M Jul 16 11:26 000000010000001600000026
    -rw------- 1 postgres postgres  64M Jul 16 11:40 000000010000001600000027
    -rw------- 1 postgres postgres  64M Jul 16 11:40 000000010000001600000028
    -rw------- 1 postgres postgres  64M Jul 16 11:51 000000010000001600000029
    -rw------- 1 postgres postgres  64M Jul 16 11:40 00000001000000160000002A
    drwx------ 2 postgres postgres 4.0K Jun 18 10:15 archive_status
    
    保留000000010000001600000027之后的日志
     pg_archivecleanup /opt/pgdata11.3/pg_root/pg_wal/  000000010000001600000027
     
     再次查看验证
     ls
    000000010000001600000027  000000010000001600000028  000000010000001600000029  00000001000000160000002A  archive_status

[WAL_Write Ahead Logging]: https://dazuiba008.blog.csdn.net/article/details/95313020