使用crontab定时调度脚本做数据备份

浅浅的花香味﹌ 2023-05-31 03:19 170阅读 0赞

**以redis备份为例,rdb适合做冷备,我们只需要备份dump文件即可**

*  写crontab定时调度脚本做数据备份
 *  每小时都copy一份rdb的备份到一个目录中去,仅仅保留最近48小时的备份
 *  每天都保留一份当日的rdb的备份到一个目录中去,仅仅保留最近一个月的备份
 *  每次copy备份的时候都删除太久的备份文件
 *  每天晚上将当前服务器的所有数据备份,发送一份到远程的云服务器上

1.  当前位置
2.  ![20191022191120158.png][]
3.  创建copy目录并进入   mkdir copy && cd copy    这个目录主要放脚本
4.  创建按小时备份的脚本 vi redis-rdb-copy-hourly.sh
5.      #!/bin/sh
        
        cur_date=`date +%Y%m%d%k`
        rm -rf /usr/local/docker/redis/snapshotting/$cur_date
        mkdir -p  /usr/local/docker/redis/snapshotting/$cur_date
        cp /usr/local/docker/redis/data/dump.rdb /usr/local/docker/redis/snapshotting/$cur_date
        cp /usr/local/docker/redis/data/appendonly.aof /usr/local/docker/redis/snapshotting/$cur_date
        
        del_date=`date -d -48hour +%Y%m%d%k`
        rm -rf /usr/local/docker/redis/snapshotting/$del_datel_date
    
     
6.  赋予权限  chmod 777 redis-rdb-copy-hourly.sh
7.   
    
    返回上一级目录并创建snapshotting文件夹    cd .. && mkdir snapshotting   用来存放备份文件
8.  创建定时任务 crontab -e
9.      0 * * * * sh /usr/local/docker/redis/copy/redis-rdb-copy-hourly.sh
    
    每小时的0分执行脚本
10. 创建按天备份的脚本 cp redis-rdb-copy-hourly.sh redis-rdb-copy-daily.sh    
11. vi redis-rdb-copy-daily.sh
12.     #!/bin/sh
        
        cur_date=`date +%Y%m%d`
        rm -rf /usr/local/docker/redis/snapshotting/$cur_date
        mkdir -p  /usr/local/docker/redis/snapshotting/$cur_date
        cp /usr/local/docker/redis/data/dump.rdb /usr/local/docker/redis/snapshotting/$cur_date
        cp /usr/local/docker/redis/data/appendonly.aof /usr/local/docker/redis/snapshotting/$cur_date
        
        del_date=`date -d -1month +%Y%m%d`
        rm -rf /usr/local/docker/redis/snapshotting/$del_date
    
     
13. 添加定时任务  crontab -e
14.     0 * * * * sh /usr/local/docker/redis/copy/redis-rdb-copy-hourly.sh
        0 0 * * * sh /usr/local/docker/redis/copy/redis-rdb-copy-daily.sh
    
    每天的0时0分执行脚本
15. 可以手动执行 \[root@localhost redis\]\# ./copy/redis-rdb-copy-daily.sh  进行测试 (先创建一个过期时间的目录)

**数据恢复**

当开启了appendonly=yes后,如果同时存在appendonly.aof和dump.rdb,redis会有限使用appendonly.aof进行恢复.

当redis自动生成的appendonly.aof和dump.rdb损坏或者丢失后,我们用备份的dump.rdb来进行恢复.

1.  首先修改docker-compose.yml,去掉--appendonly yes
2.  将备份文件复制到data目录 \[root@localhost data\]\# cp ../snapshotting/2019102220/dump.rdb  .
3.  启动docker-compose up -d
4.  进入 docker exec -it redis-master bash
5.  连接 redis-cli
6.  查看键 keys \*
7.  此时数据已经通过dump.rdb恢复
8.  下面要开启appendonly,  config get appendonly
9.  退出,查看data目录有了appendonly.aof文件
10. 停止 docker-compose down
11. 修改docker-compose.yml,加上之前删除的--appendonly yes,然后再启动docker-compose.这样我们的数据也恢复了,redis也开启了appendonly. 之所以这样麻烦,是因为redis开启了appendonly后,如果data目录没有appendonly.aof文件,会自动创建一个空的appendonly.aof,然后用空的appendonly.aof去恢复数据,这样我们备份的dump.rdb没起作用.

[20191022191120158.png]: /images/20230531/d0d247cbd0bd4befb1e4910e8458f5e8.png