自动化远程备份 Mysql+Web 数据加备份服务检测,为 blog 数据保驾护航

本贴最后更新于 2138 天前,其中的信息可能已经时移世异

之前都没有备份 blog 数据的习惯,而且 blog 更多时候是闲着的,甚至自己很久都没有打开过。有一次服务器过期了很久才发现,最后已经为时已晚了。blog 虽小,但数据珍贵。这次闲下来写了一份远程备份 Mysql+Web 脚本和一份备份服务检测脚本,可以大大提升数据的安全性!

系统环境:
Server 端:Centos 7.6
远程备份端:群辉 NAS(已经配置好 DDNS)
适用站点:个人 blog / 数据量不太大的站点

如果没有群辉的话也没有关系,有另外一台单独的 linux 机器也是可以的,只不过后面的提醒会比较麻烦一点,要配置好邮件服务,能向外发送邮件,遇到异常可以第一时间处置,不至于像我之前一样丢失数据。

Server 端脚本:

#!/bin/bash NOW_DATE=$(date +%Y%m%d_%H%M%S) MYSQL_FILENAME="solo_${NOW_DATE}.sql" #mysql导出的文件名 WEB_FILENAME="web_backup${NOW_DATE}.tar.gz" #web打包备份后的文件名 mysqldump -uroot -p password solo > /data/backup/Mysqldump/${MYSQL_FILENAME} HOST=nas_domain #我的NAS域名,或者你的备份端地址 USER=user #ftp账号 PASSWORD=password #ftp密码 LOCAL_MYSQL_PATH=/data/backup/Mysqldump #Server端mysql备份文件存放目录 LOCAL_WEB_BACKUP_PATH=/data/backup/Web_backup #Server端web打包文件存放目录 WEB_PATH=/data/www/wwwroot #Webroot路径 REMOTE_MYSQL_PATH=/Server_backup/Mysql/ #备份端存SQL文件放路径 REMOTE_WEB_PATH=/Server_backup/Web/ #备份端Web文件存放路径 /usr/bin/ftp -vn <<EOF open ${HOST} user ${USER} ${PASSWORD} binary prompt cd ${REMOTE_MYSQL_PATH} lcd ${LOCAL_MYSQL_PATH} put ${MYSQL_FILENAME} bye EOF find ${LOCAL_MYSQL_PATH} -mtime +10 -name "*.sql" | xargs rm -f #删除Server端老旧的备份文件 tar -czf /$LOCAL_WEB_BACKUP_PATH/${WEB_FILENAME} -C /data/www/wwwroot/ webroot #这样打包出来的文件不含绝对路径,这样解压也比较安全 /usr/bin/ftp -vn <<EOF open ${HOST} user ${USER} ${PASSWORD} binary prompt cd ${REMOTE_WEB_PATH} lcd ${LOCAL_WEB_BACKUP_PATH} put ${WEB_FILENAME} bye EOF find ${LOCAL_WEB_PATH} -mtime +10 -name "*.gz" | xargs rm -f #删除Server端老旧的Web备份文件

这个脚本本身不适用于数据量大的站点,第一是数据量大可能会有文件损坏的情况发生,第二是这个脚本每次都是全量备份,占据的空间量大。大型的站点应该采用更可靠的传输方式以及一次全量备份多次增量备份的形式,更加稳妥。

以上脚本利用 crontab 定时任务来执行,crontab -l 查看所有的定时任务;crontab -e 编辑定时任务。我的是 0 0,12 * * * ,也就是每天 0 点和中午 12 点准点执行一次。

检测备份服务脚本(在备份端执行):

#!/bin/ash declare -i MYSQL_FILES=$(find /volume1/Server_backup/Mysql -type f -mtime -1|wc -l) declare -i WEB_FILES=$(find /volume1/Server_backup/Web -type f -mtime -1|wc -l) declare -i TODAY_FILE_NUMS=${MYSQL_FILES}+${WEB_FILES} case ${TODAY_FILE_NUMS} in 0) echo "Web服务器备份服务不可用,请检查!" exit 1 ;; 1) echo “Web服务器备份服务不可用,请检查!” exit 1 ;; 2) echo “Web服务器备份服务疑似不可用,请检查!" exit 1 ;; 3) echo "接收到的Web服务器备份文件(Mysql与Web)数量不对齐,请检查!" exit 1 ;; 4) echo "今日收到备份文件数量正确,服务端正常可用。" esac exit 0

原理很简单,只要检查 24 小时内收到的文件数量对齐,说明备份服务正常可用。反之则不可用。
因为群辉自带的定时任务功能可以将执行输出发送邮件到我的邮箱,所以这里免去了很多麻烦。如果你的是其他 Linux 机器,可能需要手动配置好邮件服务,上面的脚本也需要对应修改。

清理老旧的备份文件,避免存储空间的浪费:

#!/bin/ash MYSQL_PATH=/volume1/Server_backup/Mysql WEB_PATH=/volume1/Server_backup/Web find ${MYSQL_PATH} -mtime +7 -name "*.sql" | xargs rm -f find ${WEB_PATH} -mtime +7 -name "*.gz" | xargs rm -f
  • Linux

    Linux 是一套免费使用和自由传播的类 Unix 操作系统,是一个基于 POSIX 和 Unix 的多用户、多任务、支持多线程和多 CPU 的操作系统。它能运行主要的 Unix 工具软件、应用程序和网络协议,并支持 32 位和 64 位硬件。Linux 继承了 Unix 以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。

    954 引用 • 944 回帖
  • 备份
    13 引用 • 18 回帖
  • Solo

    Solo 是一款小而美的开源博客系统,专为程序员设计。Solo 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    1444 引用 • 10083 回帖 • 503 关注

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • Solo

    Solo 是一款小而美的开源博客系统,专为程序员设计。Solo 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    1444 引用 • 10083 回帖 • 503 关注
  • 服务器

    服务器,也称伺服器,是提供计算服务的设备。由于服务器需要响应服务请求,并进行处理,因此一般来说服务器应具备承担服务并且保障服务的能力。

    125 引用 • 585 回帖
  • Eclipse

    Eclipse 是一个开放源代码的、基于 Java 的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。

    76 引用 • 258 回帖 • 625 关注
  • Google

    Google(Google Inc.,NASDAQ:GOOG)是一家美国上市公司(公有股份公司),于 1998 年 9 月 7 日以私有股份公司的形式创立,设计并管理一个互联网搜索引擎。Google 公司的总部称作“Googleplex”,它位于加利福尼亚山景城。Google 目前被公认为是全球规模最大的搜索引擎,它提供了简单易用的免费服务。不作恶(Don't be evil)是谷歌公司的一项非正式的公司口号。

    49 引用 • 192 回帖
  • WebComponents

    Web Components 是 W3C 定义的标准,它给了前端开发者扩展浏览器标签的能力,可以方便地定制可复用组件,更好的进行模块化开发,解放了前端开发者的生产力。

    1 引用 • 10 关注
  • Office

    Office 现已更名为 Microsoft 365. Microsoft 365 将高级 Office 应用(如 Word、Excel 和 PowerPoint)与 1 TB 的 OneDrive 云存储空间、高级安全性等结合在一起,可帮助你在任何设备上完成操作。

    5 引用 • 34 回帖 • 1 关注
  • 游戏

    沉迷游戏伤身,强撸灰飞烟灭。

    187 引用 • 831 回帖
  • uTools

    uTools 是一个极简、插件化、跨平台的现代桌面软件。通过自由选配丰富的插件,打造你得心应手的工具集合。

    7 引用 • 28 回帖 • 1 关注
  • Notion

    Notion - The all-in-one workspace for your notes, tasks, wikis, and databases.

    10 引用 • 77 回帖
  • 持续集成

    持续集成(Continuous Integration)是一种软件开发实践,即团队开发成员经常集成他们的工作,通过每个成员每天至少集成一次,也就意味着每天可能会发生多次集成。每次集成都通过自动化的构建(包括编译,发布,自动化测试)来验证,从而尽早地发现集成错误。

    15 引用 • 7 回帖 • 1 关注
  • frp

    frp 是一个可用于内网穿透的高性能的反向代理应用,支持 TCP、UDP、 HTTP 和 HTTPS 协议。

    17 引用 • 7 回帖
  • Wide

    Wide 是一款基于 Web 的 Go 语言 IDE。通过浏览器就可以进行 Go 开发,并有代码自动完成、查看表达式、编译反馈、Lint、实时结果输出等功能。

    欢迎访问我们运维的实例: https://wide.b3log.org

    30 引用 • 218 回帖 • 642 关注
  • 印象笔记
    3 引用 • 16 回帖 • 1 关注
  • 安全

    安全永远都不是一个小问题。

    199 引用 • 818 回帖
  • Kotlin

    Kotlin 是一种在 Java 虚拟机上运行的静态类型编程语言,由 JetBrains 设计开发并开源。Kotlin 可以编译成 Java 字节码,也可以编译成 JavaScript,方便在没有 JVM 的设备上运行。在 Google I/O 2017 中,Google 宣布 Kotlin 成为 Android 官方开发语言。

    19 引用 • 33 回帖 • 83 关注
  • 爬虫

    网络爬虫(Spider、Crawler),是一种按照一定的规则,自动地抓取万维网信息的程序。

    106 引用 • 275 回帖
  • SQLServer

    SQL Server 是由 [微软] 开发和推广的关系数据库管理系统(DBMS),它最初是由 微软、Sybase 和 Ashton-Tate 三家公司共同开发的,并于 1988 年推出了第一个 OS/2 版本。

    21 引用 • 31 回帖
  • RESTful

    一种软件架构设计风格而不是标准,提供了一组设计原则和约束条件,主要用于客户端和服务器交互类的软件。基于这个风格设计的软件可以更简洁,更有层次,更易于实现缓存等机制。

    30 引用 • 114 回帖 • 5 关注
  • Excel
    31 引用 • 28 回帖
  • Hadoop

    Hadoop 是由 Apache 基金会所开发的一个分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

    93 引用 • 122 回帖 • 619 关注
  • Flume

    Flume 是一套分布式的、可靠的,可用于有效地收集、聚合和搬运大量日志数据的服务架构。

    9 引用 • 6 回帖 • 660 关注
  • OnlyOffice
    4 引用 • 18 关注
  • 前端

    前端技术一般分为前端设计和前端开发,前端设计可以理解为网站的视觉设计,前端开发则是网站的前台代码实现,包括 HTML、CSS 以及 JavaScript 等。

    246 引用 • 1338 回帖
  • Hibernate

    Hibernate 是一个开放源代码的对象关系映射框架,它对 JDBC 进行了非常轻量级的对象封装,使得 Java 程序员可以随心所欲的使用对象编程思维来操纵数据库。

    39 引用 • 103 回帖 • 727 关注
  • OneDrive
    2 引用 • 6 关注
  • Bootstrap

    Bootstrap 是 Twitter 推出的一个用于前端开发的开源工具包。它由 Twitter 的设计师 Mark Otto 和 Jacob Thornton 合作开发,是一个 CSS / HTML 框架。

    18 引用 • 33 回帖 • 647 关注
  • abitmean

    有点意思就行了

    36 关注