自动化远程备份 Mysql+Web 数据加备份服务检测,为 blog 数据保驾护航

本贴最后更新于 1824 天前,其中的信息可能已经时移世异

之前都没有备份 blog 数据的习惯,而且 blog 更多时候是闲着的,甚至自己很久都没有打开过。有一次服务器过期了很久才发现,最后已经为时已晚了。blog 虽小,但数据珍贵。这次闲下来写了一份远程备份 Mysql+Web 脚本和一份备份服务检测脚本,可以大大提升数据的安全性!

系统环境:
Server 端:Centos 7.6
远程备份端:群辉 NAS(已经配置好 DDNS)
适用站点:个人 blog / 数据量不太大的站点

如果没有群辉的话也没有关系,有另外一台单独的 linux 机器也是可以的,只不过后面的提醒会比较麻烦一点,要配置好邮件服务,能向外发送邮件,遇到异常可以第一时间处置,不至于像我之前一样丢失数据。

Server 端脚本:

#!/bin/bash
NOW_DATE=$(date +%Y%m%d_%H%M%S)
MYSQL_FILENAME="solo_${NOW_DATE}.sql"		#mysql导出的文件名
WEB_FILENAME="web_backup${NOW_DATE}.tar.gz"	#web打包备份后的文件名
mysqldump -uroot -p password solo  > /data/backup/Mysqldump/${MYSQL_FILENAME}

HOST=nas_domain			#我的NAS域名,或者你的备份端地址
USER=user			#ftp账号
PASSWORD=password		#ftp密码
LOCAL_MYSQL_PATH=/data/backup/Mysqldump		#Server端mysql备份文件存放目录
LOCAL_WEB_BACKUP_PATH=/data/backup/Web_backup		#Server端web打包文件存放目录
WEB_PATH=/data/www/wwwroot		#Webroot路径
REMOTE_MYSQL_PATH=/Server_backup/Mysql/		#备份端存SQL文件放路径
REMOTE_WEB_PATH=/Server_backup/Web/		#备份端Web文件存放路径

/usr/bin/ftp -vn <<EOF
 open ${HOST}
 user ${USER} ${PASSWORD}
 binary
 prompt
 cd ${REMOTE_MYSQL_PATH}
 lcd ${LOCAL_MYSQL_PATH}
 put ${MYSQL_FILENAME}
 bye
EOF

find ${LOCAL_MYSQL_PATH} -mtime +10 -name "*.sql" | xargs rm -f	#删除Server端老旧的备份文件

tar -czf  /$LOCAL_WEB_BACKUP_PATH/${WEB_FILENAME} -C /data/www/wwwroot/ webroot		#这样打包出来的文件不含绝对路径,这样解压也比较安全
/usr/bin/ftp -vn <<EOF
 open ${HOST}
 user ${USER} ${PASSWORD}
 binary
 prompt
 cd ${REMOTE_WEB_PATH}
 lcd ${LOCAL_WEB_BACKUP_PATH}
 put ${WEB_FILENAME}
 bye
EOF

find ${LOCAL_WEB_PATH} -mtime +10 -name "*.gz" | xargs rm -f		#删除Server端老旧的Web备份文件

这个脚本本身不适用于数据量大的站点,第一是数据量大可能会有文件损坏的情况发生,第二是这个脚本每次都是全量备份,占据的空间量大。大型的站点应该采用更可靠的传输方式以及一次全量备份多次增量备份的形式,更加稳妥。

以上脚本利用 crontab 定时任务来执行,crontab -l 查看所有的定时任务;crontab -e 编辑定时任务。我的是 0 0,12 * * * ,也就是每天 0 点和中午 12 点准点执行一次。

检测备份服务脚本(在备份端执行):

#!/bin/ash
declare -i MYSQL_FILES=$(find /volume1/Server_backup/Mysql -type f  -mtime -1|wc -l)
declare -i WEB_FILES=$(find /volume1/Server_backup/Web -type f  -mtime -1|wc -l)
declare -i TODAY_FILE_NUMS=${MYSQL_FILES}+${WEB_FILES}


case ${TODAY_FILE_NUMS} in
    0)
        echo "Web服务器备份服务不可用,请检查!"
        exit 1
        ;;
    1)
        echo “Web服务器备份服务不可用,请检查!”
        exit 1
        ;;
    2)
        echo “Web服务器备份服务疑似不可用,请检查!"
        exit 1
        ;;
    3)
        echo "接收到的Web服务器备份文件(Mysql与Web)数量不对齐,请检查!"
        exit 1
        ;;
    4)
        echo "今日收到备份文件数量正确,服务端正常可用。"
esac
exit 0

原理很简单,只要检查 24 小时内收到的文件数量对齐,说明备份服务正常可用。反之则不可用。
因为群辉自带的定时任务功能可以将执行输出发送邮件到我的邮箱,所以这里免去了很多麻烦。如果你的是其他 Linux 机器,可能需要手动配置好邮件服务,上面的脚本也需要对应修改。

清理老旧的备份文件,避免存储空间的浪费:

#!/bin/ash
MYSQL_PATH=/volume1/Server_backup/Mysql
WEB_PATH=/volume1/Server_backup/Web

find ${MYSQL_PATH} -mtime +7 -name "*.sql" | xargs rm -f
find ${WEB_PATH} -mtime +7 -name "*.gz" | xargs rm -f
  • Linux

    Linux 是一套免费使用和自由传播的类 Unix 操作系统,是一个基于 POSIX 和 Unix 的多用户、多任务、支持多线程和多 CPU 的操作系统。它能运行主要的 Unix 工具软件、应用程序和网络协议,并支持 32 位和 64 位硬件。Linux 继承了 Unix 以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。

    926 引用 • 937 回帖
  • 备份
    12 引用 • 18 回帖
  • Solo

    Solo 是一款小而美的开源博客系统,专为程序员设计。Solo 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    1429 引用 • 10052 回帖 • 485 关注

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • Pipe

    Pipe 是一款小而美的开源博客平台。Pipe 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    131 引用 • 1114 回帖 • 136 关注
  • HHKB

    HHKB 是富士通的 Happy Hacking 系列电容键盘。电容键盘即无接点静电电容式键盘(Capacitive Keyboard)。

    5 引用 • 74 回帖 • 445 关注
  • iOS

    iOS 是由苹果公司开发的移动操作系统,最早于 2007 年 1 月 9 日的 Macworld 大会上公布这个系统,最初是设计给 iPhone 使用的,后来陆续套用到 iPod touch、iPad 以及 Apple TV 等产品上。iOS 与苹果的 Mac OS X 操作系统一样,属于类 Unix 的商业操作系统。

    84 引用 • 139 回帖 • 2 关注
  • 倾城之链
    23 引用 • 66 回帖 • 125 关注
  • Log4j

    Log4j 是 Apache 开源的一款使用广泛的 Java 日志组件。

    20 引用 • 18 回帖 • 26 关注
  • wolai

    我来 wolai:不仅仅是未来的云端笔记!

    2 引用 • 14 回帖 • 4 关注
  • 黑曜石

    黑曜石是一款强大的知识库工具,支持本地 Markdown 文件编辑,支持双向链接和关系图。

    A second brain, for you, forever.

    10 引用 • 88 回帖
  • 资讯

    资讯是用户因为及时地获得它并利用它而能够在相对短的时间内给自己带来价值的信息,资讯有时效性和地域性。

    54 引用 • 85 回帖
  • 开源中国

    开源中国是目前中国最大的开源技术社区。传播开源的理念,推广开源项目,为 IT 开发者提供了一个发现、使用、并交流开源技术的平台。目前开源中国社区已收录超过两万款开源软件。

    7 引用 • 86 回帖 • 1 关注
  • Jenkins

    Jenkins 是一套开源的持续集成工具。它提供了非常丰富的插件,让构建、部署、自动化集成项目变得简单易用。

    52 引用 • 37 回帖 • 2 关注
  • RabbitMQ

    RabbitMQ 是一个开源的 AMQP 实现,服务器端用 Erlang 语言编写,支持多种语言客户端,如:Python、Ruby、.NET、Java、C、PHP、ActionScript 等。用于在分布式系统中存储转发消息,在易用性、扩展性、高可用性等方面表现不俗。

    49 引用 • 60 回帖 • 387 关注
  • JSON

    JSON (JavaScript Object Notation)是一种轻量级的数据交换格式。易于人类阅读和编写。同时也易于机器解析和生成。

    52 引用 • 190 回帖 • 1 关注
  • Mobi.css

    Mobi.css is a lightweight, flexible CSS framework that focus on mobile.

    1 引用 • 6 回帖 • 721 关注
  • SOHO

    为成为自由职业者在家办公而努力吧!

    7 引用 • 55 回帖 • 48 关注
  • 电影

    这是一个不能说的秘密。

    120 引用 • 598 回帖
  • 以太坊

    以太坊(Ethereum)并不是一个机构,而是一款能够在区块链上实现智能合约、开源的底层系统。以太坊是一个平台和一种编程语言 Solidity,使开发人员能够建立和发布下一代去中心化应用。 以太坊可以用来编程、分散、担保和交易任何事物:投票、域名、金融交易所、众筹、公司管理、合同和知识产权等等。

    34 引用 • 367 回帖
  • SVN

    SVN 是 Subversion 的简称,是一个开放源代码的版本控制系统,相较于 RCS、CVS,它采用了分支管理系统,它的设计目标就是取代 CVS。

    29 引用 • 98 回帖 • 698 关注
  • Spark

    Spark 是 UC Berkeley AMP lab 所开源的类 Hadoop MapReduce 的通用并行框架。Spark 拥有 Hadoop MapReduce 所具有的优点;但不同于 MapReduce 的是 Job 中间输出结果可以保存在内存中,从而不再需要读写 HDFS,因此 Spark 能更好地适用于数据挖掘与机器学习等需要迭代的 MapReduce 的算法。

    74 引用 • 46 回帖 • 562 关注
  • Hadoop

    Hadoop 是由 Apache 基金会所开发的一个分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

    86 引用 • 122 回帖 • 619 关注
  • 周末

    星期六到星期天晚,实行五天工作制后,指每周的最后两天。再过几年可能就是三天了。

    14 引用 • 297 回帖 • 1 关注
  • 服务

    提供一个服务绝不仅仅是简单的把硬件和软件累加在一起,它包括了服务的可靠性、服务的标准化、以及对服务的监控、维护、技术支持等。

    41 引用 • 24 回帖 • 1 关注
  • 小说

    小说是以刻画人物形象为中心,通过完整的故事情节和环境描写来反映社会生活的文学体裁。

    28 引用 • 108 回帖
  • 面试

    面试造航母,上班拧螺丝。多面试,少加班。

    324 引用 • 1395 回帖
  • CloudFoundry

    Cloud Foundry 是 VMware 推出的业界第一个开源 PaaS 云平台,它支持多种框架、语言、运行时环境、云平台及应用服务,使开发人员能够在几秒钟内进行应用程序的部署和扩展,无需担心任何基础架构的问题。

    5 引用 • 18 回帖 • 148 关注
  • Logseq

    Logseq 是一个隐私优先、开源的知识库工具。

    Logseq is a joyful, open-source outliner that works on top of local plain-text Markdown and Org-mode files. Use it to write, organize and share your thoughts, keep your to-do list, and build your own digital garden.

    5 引用 • 62 回帖 • 8 关注
  • WordPress

    WordPress 是一个使用 PHP 语言开发的博客平台,用户可以在支持 PHP 和 MySQL 数据库的服务器上架设自己的博客。也可以把 WordPress 当作一个内容管理系统(CMS)来使用。WordPress 是一个免费的开源项目,在 GNU 通用公共许可证(GPLv2)下授权发布。

    58 引用 • 113 回帖 • 273 关注
  • Facebook

    Facebook 是一个联系朋友的社交工具。大家可以通过它和朋友、同事、同学以及周围的人保持互动交流,分享无限上传的图片,发布链接和视频,更可以增进对朋友的了解。

    4 引用 • 15 回帖 • 460 关注