10 月至,在这喜获丰收的季节里,我们即将迎来“祖国 73 周年华诞”国庆节!让我们共庆盛世中华!
本文的写作原因:对实际客户需求的一次小总结,顺带做一次笔记
数据库备份方案起因
任何数据库都需要备份,备份数据是维护数据库必不可少的操作。
数据库备份常见的应用场景:
硬件故障造成数据库部分数据或全部数据丢失
人为操作失误造成某些数据被误操作
软件 BUG 造成部分数据或全部数据丢失
……
对于上述场景还有很多,公司里面让我做数据库备份就以上三个原因(只针对我们公司的业务来说)
数据库备份的实际操作
测试环境:
centos 7
docker 20.10.12
postgis/postgis:13-master
复制代码
老板要求数据库备份的这个方案最好能跟着数据库启动自动配置,不需要人工配置,且能够清除历史备份(这个算基本需求)
注意:下面所提到的脚本文件都放在同一个目录下
一、选择数据库备份时间
在业务闲时,设置定时任务 crontab 定时任务(每日凌晨),全量备份,这里查看过pgsql的官方文档最后决定使用 pg_basebackup 的命令来实现,其他方式看了一下不太适合我这个菜鸡。
二、编写数据库备份脚本
数据库备份及删除历史备份,脚本如下(backup.sh)
#!/bin/bash
#利用docker命令向容器打入命令
docker exec --user postgres postgis pg_basebackup -F t -z -R -D /data/backup
#做个异常识别,不然长时间备份不成功会把以前的备份删掉
if [ $? -ne 0 ]; then
echo "failed to backup"
exit 1
else
echo "succeed to backup"
fi
#移动备份文件(从docker映射路径移到其他地方)
mv /data/db/postgis/data/backup /data/postgresql/backup/data/$(date +%Y%m%d%H%M%S)
#sevendays_time=$(date -d -7days '+%Y%m%d')
#删除超过七天的文件
cd /data/postgresql/backup/data
rm -rf $(date -d -7days '+%Y%m%d')*
复制代码
三、将定时任务配置到服务器的定时任务上
将 backup.sh 的操作任务配置到 crontab 上,脚本如下(confBackup.sh)
#!/bin/bash
myShell=backup.sh
filePath=$(cd "$(dirname "$0")";pwd)
echo $filePath
echo $myShell
crontab -l > cron
number=`grep -n "$myShell" cron | cut -d ":" -f 1`
aa=$number
echo $aa
if [ -z $aa ];
then
echo "该任务不存在,将添加"
echo '* 0 * * * '$filePath'/'$myShell'' >> cron
crontab cron
rm -f cron
else
echo "该任务已经存在,将会先删除再添加"
sed -i '/'$myShell'/d' cron
echo '* 0 * * * '$filePath'/'$myShell'' >> cron
crontab cron
rm -f cron
fi
复制代码
四、docker 启动数据库脚本
其余 docker 的 yml 配置文件省略,编写 pgsql 的启动命令,脚本如下(start.sh)
#!/bin/bash
docker-compose -f postgis.yml up -d
./confBackup.sh
复制代码
结束
这个自动备份脚本花了我半天时间研究,其中一个最坑的就是我在脚本上加了-it
,这个-it
命令是为了开启容器终端,你必须指定参数,但是我是在脚本执行,所以导致我的脚本只能手动运行(backup.sh),不能在定时任务执行,坑的命令:docker exec -it --user postgres postgis pg_basebackup -F t -z -R -D /data/backup
参考资料:
定时任务:https://www.runoob.com/w3cnote/linux-crontab-tasks.html
数据库备份:http://www.postgres.cn/docs/9.4/app-pgbasebackup.html
复制代码
评论