写点什么

pgsql 数据库自动备份

作者:衝鋒壹号
  • 2022 年 10 月 06 日
    广东
  • 本文字数:1323 字

    阅读完需:约 4 分钟

pgsql数据库自动备份

10 月至,在这喜获丰收的季节里,我们即将迎来“祖国 73 周年华诞”国庆节!让我们共庆盛世中华!


本文的写作原因:对实际客户需求的一次小总结,顺带做一次笔记

数据库备份方案起因

任何数据库都需要备份,备份数据是维护数据库必不可少的操作。


数据库备份常见的应用场景:


  1. 硬件故障造成数据库部分数据或全部数据丢失

  2. 人为操作失误造成某些数据被误操作

  3. 软件 BUG 造成部分数据或全部数据丢失

  4. ……


对于上述场景还有很多,公司里面让我做数据库备份就以上三个原因(只针对我们公司的业务来说)

数据库备份的实际操作

测试环境:    centos 7    docker 20.10.12    postgis/postgis:13-master
复制代码


老板要求数据库备份的这个方案最好能跟着数据库启动自动配置,不需要人工配置,且能够清除历史备份(这个算基本需求)


注意:下面所提到的脚本文件都放在同一个目录下

一、选择数据库备份时间

在业务闲时,设置定时任务 crontab 定时任务(每日凌晨),全量备份,这里查看过pgsql的官方文档最后决定使用 pg_basebackup 的命令来实现,其他方式看了一下不太适合我这个菜鸡。

二、编写数据库备份脚本

数据库备份及删除历史备份,脚本如下(backup.sh)


#!/bin/bash
#利用docker命令向容器打入命令docker exec --user postgres postgis pg_basebackup -F t -z -R -D /data/backup
#做个异常识别,不然长时间备份不成功会把以前的备份删掉if [ $? -ne 0 ]; then echo "failed to backup" exit 1else echo "succeed to backup"fi
#移动备份文件(从docker映射路径移到其他地方)mv /data/db/postgis/data/backup /data/postgresql/backup/data/$(date +%Y%m%d%H%M%S)
#sevendays_time=$(date -d -7days '+%Y%m%d')#删除超过七天的文件cd /data/postgresql/backup/datarm -rf $(date -d -7days '+%Y%m%d')*
复制代码

三、将定时任务配置到服务器的定时任务上

将 backup.sh 的操作任务配置到 crontab 上,脚本如下(confBackup.sh)


#!/bin/bash
myShell=backup.shfilePath=$(cd "$(dirname "$0")";pwd)echo $filePathecho $myShell
crontab -l > cronnumber=`grep -n "$myShell" cron | cut -d ":" -f 1`aa=$numberecho $aa
if [ -z $aa ];thenecho "该任务不存在,将添加"echo '* 0 * * * '$filePath'/'$myShell'' >> croncrontab cronrm -f cronelseecho "该任务已经存在,将会先删除再添加"sed -i '/'$myShell'/d' cronecho '* 0 * * * '$filePath'/'$myShell'' >> croncrontab cronrm -f cronfi
复制代码

四、docker 启动数据库脚本

其余 docker 的 yml 配置文件省略,编写 pgsql 的启动命令,脚本如下(start.sh)


#!/bin/bash
docker-compose -f postgis.yml up -d
./confBackup.sh
复制代码

结束

这个自动备份脚本花了我半天时间研究,其中一个最坑的就是我在脚本上加了-it,这个-it命令是为了开启容器终端,你必须指定参数,但是我是在脚本执行,所以导致我的脚本只能手动运行(backup.sh),不能在定时任务执行,坑的命令:docker exec -it --user postgres postgis pg_basebackup -F t -z -R -D /data/backup


参考资料:定时任务:https://www.runoob.com/w3cnote/linux-crontab-tasks.html数据库备份:http://www.postgres.cn/docs/9.4/app-pgbasebackup.html
复制代码


用户头像

衝鋒壹号

关注

还未添加个人签名 2020.10.20 加入

还未添加个人简介

评论

发布
暂无评论
pgsql数据库自动备份_10月月更_衝鋒壹号_InfoQ写作社区