一键备份脚本backup.sh

技术 秋水逸冰 141100浏览 119评论

做网站最重要的是什么?数据!数据,是网站之本,备份,是每一个站长都应该重视的事情。但同时,备份也是一件繁琐和重复的事情。所以,这些事情,肯定能做到自动化的。
下面来介绍一下这个一键备份脚本 backup.sh。

总结一下 backup.sh 特点:

1、支持 MySQL/MariaDB/Percona 的数据库全量备份或选择备份;
2、支持指定目录或文件的备份;
3、支持加密备份文件(需安装 openssl 命令,可选);
4、支持上传至 Google Drive(需先安装 rclone 并配置,可选);
5、支持在删除指定天数本地旧的备份文件的同时,也删除 Google Drive 上的同名文件(可选)。

2020 年 2 月 8 日更新:
1、修改:替换 gdrive 为 rclone 命令;
2、修改:默认的备份目录为 /opt/backups;
3、新增:3 个参数,RCLONE_NAME , RCLONE_FOLDER 和 RCLONE_FLG,文章里有具体介绍。
2016 年 8 月 21 日更新:
1、新增:指定 MySQL/MariaDB 的数据库名进行备份,可以同时指定多个;
2、新增:删除指定天数本地旧的备份文件。
2016 年 9 月 8 日更新:
1、新增:删除指定天数本地旧的备份文件的同时,可选删除 Google Drive 上的同名文件。
2016 年 11 月 29 日更新:
1、新增:上传备份文件到 FTP 选项;
2、新增:删除指定天数本地旧的备份文件的同时,可选删除 Google Drive 及 FTP 上的同名文件。

教程模式开启:

1、下载该脚本并赋予执行权限

wget --no-check-certificate https://github.com/teddysun/across/raw/master/backup.sh
chmod +x backup.sh

2、修改并配置脚本

请使用 vim 或 nano 等工具来修改。

关于变量名的一些说明:

ENCRYPTFLG (加密FLG,true 为加密,false 为不加密,默认是加密)
BACKUPPASS (加密密码,重要,务必要修改)
LOCALDIR (备份目录,可自己指定)
TEMPDIR (备份目录的临时目录,可自己指定)
LOGFILE (脚本运行产生的日志文件路径)
MYSQL_ROOT_PASSWORD (MySQL/MariaDB/Percona 的 root 用户密码)
MYSQL_DATABASE_NAME (指定 MySQL/MariaDB/Percona 的数据库名,留空则是备份所有数据库)
※ MYSQL_DATABASE_NAME 是一个数组变量,可以指定多个。举例如下:

MYSQL_DATABASE_NAME[0]="phpmyadmin"
MYSQL_DATABASE_NAME[1]="test"

BACKUP (需要备份的指定目录或文件列表,留空就是不备份目录或文件)
※ BACKUP 是一个数组变量,可以指定多个。举例如下:

BACKUP[0]="/data/www/default/test.tgz"
BACKUP[1]="/data/www/default/test/"
BACKUP[2]="/data/www/default/test2/"

LOCALAGEDAILIES (指定多少天之后删除本地旧的备份文件,默认为 7 天)
DELETE_REMOTE_FILE_FLG (删除 Google Drive 或 FTP 上备份文件的 FLG,true 为删除,false 为不删除)
RCLONE_NAME (设置 rclone config 时设定的 remote 名称,务必要指定)
RCLONE_FOLDER (指定备份时设定的 remote 的目录名称,该目录名在 Google Drive 不存在时则会自行创建。默认为空,也就是根目录)
RCLONE_FLG (上传本地备份文件至 Google Drive 的 FLG,true 为上传,false 为不上传)

FTP_FLG (上传文件至 FTP 服务器的 FLG,true 为上传,false 为不上传)
FTP_HOST (连接的 FTP 域名或 IP 地址)
FTP_USER (连接的 FTP 的用户名)
FTP_PASS (连接的 FTP 的用户的密码)
FTP_DIR (连接的 FTP 的远程目录,比如: public_html)

一些注意事项的说明:

1)脚本需要用 root 用户来执行;
2)脚本需要用到 openssl 来加密,请事先安装好;
3)脚本默认备份所有的数据库(全量备份);
4)备份文件的解密命令如下:

openssl enc -aes256 -in [ENCRYPTED BACKUP] -out decrypted_backup.tgz -pass pass:[BACKUPPASS] -d -md sha1

5)备份文件解密后,解压命令如下:

tar -zxPf [DECRYPTION BACKUP FILE]

解释一下参数 -P:
tar 压缩文件默认都是相对路径的。加个 -P 是为了 tar 能以绝对路径压缩文件。因此,解压的时候也要带个 -P 参数。

3、配置 rclone 命令

rclone 是一个命令行工具,用于 Google Drive 的上传下载等操作。官网网站:
https://rclone.org/

你可以用以下的命令来安装 rclone,以 RedHat 系举例,记得要先安装 unzip 命令。

yum -y install unzip && wget -qO- https://rclone.org/install.sh | bash

然后,运行以下命令开始配置:

rclone config

参考这篇文章,当设置到 Use auto config? 是否使用自动配置,选 n 不自动配置,然后根据提示用浏览器打开 rclone 给出的 URL,点击接受(Accept),然后将浏览器上显示出来的字符串粘贴回命令行里,完成授权,然后退出即可。参考文章里有挂载的操作,记得这里不需要挂载 Google Drive。

4、运行脚本开始备份

./backup.sh

脚本默认会显示备份进度,并在最后统计出所需时间。
如果你想将脚本加入到 cron 自动运行的话,就不需要前台显示备份进度,只写日志就可以了。
这个时候你需要稍微改一下脚本中的 log 函数。

log() {
    echo "$(date "+%Y-%m-%d %H:%M:%S")" "$1"
    echo -e "$(date "+%Y-%m-%d %H:%M:%S")" "$1" >> ${LOGFILE}
}

改为:

log() {
    echo -e "$(date "+%Y-%m-%d %H:%M:%S")" "$1" >> ${LOGFILE}
}

关于如何使用 cron 自动备份,网上有一堆教程,这里以 CentOS 6 来举例说明。

修改文件 /etc/crontab,内容如下:

SHELL=/bin/bash
PATH=/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:~/bin
MAILTO=root
HOME=/root

# For details see man 4 crontabs

# Example of job definition:
# .---------------- minute (0 - 59)
# |  .------------- hour (0 - 23)
# |  |  .---------- day of month (1 - 31)
# |  |  |  .------- month (1 - 12) OR jan,feb,mar,apr ...
# |  |  |  |  .---- day of week (0 - 6) (Sunday=0 or 7) OR sun,mon,tue,wed,thu,fri,sat
# |  |  |  |  |
# *  *  *  *  * user-name command to be executed
30  1  *  *  * root bash /root/backup.sh

以上表示,每天凌晨 1 点 30 分,以 root 用户执行一次 backup.sh 脚本。
注意:
一定要修改其中的 PATH 和 HOME 变量的值。
尤其是 HOME 变量,rclone 命令能否正确执行,是要依赖于其配置文件的。用 root 用户配置的话,其配置文件夹应该是 /root/.config/rclone ,所以要更改 HOME 的值。

最后,欢迎交流和提出意见。

转载请注明:秋水逸冰 » 一键备份脚本backup.sh

发表我的评论
取消评论

请输入正确答案后提交评论 *超出时限。 请再次填写验证码。

表情

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址

网友最新评论 (119)

  1. 好东西转了一个
    zcluo5年前(2018-12-16)回复
  2. 反馈一个问题 刚在Lightsail上使用ftp备份出现这种错误 root@debian:~# ./backup.sh ftp: bind: Address already in use 搜索了下找到这篇文章http://www.54it.top/archives/11760.html 照葫芦画瓢在ftp -in ${FTP_HOST} 2>&1 >> ${LOGFILE} <<EOF这行-in之前加了个-p 不报错了 您看着是不是修改下 应该像阿里云 Amazon这种有内网ip的机器上不加个-p都不行
    index5年前(2018-11-18)回复
    • 感谢反馈!我已经修改了脚本,加入了 -p 参数。 ftp 命令默认是开启 passive 模式的。输入 ftp -h 可以查看帮助。 -p: enable passive mode (default for ftp and pftp) 所以也有可能你的 ftp 版本比较低。
      秋水逸冰5年前(2018-11-23)回复
  3. 是什麼問題呢,踏入了7,8月後, 備份不會自動刪除了......
    zzz5年前(2018-10-27)回复
  4. 求助备份文件的解密命令 [ENCRYPTED BACKUP] 是什么要修改成什么才行?? 备份文件解密后,解压命令如下: tar -zxPf [DECRYPTION BACKUP FILE] 是不是修改为 tar -zxPf [20181003013001.tgz.enc FILE]
    新手6年前(2018-10-03)回复
    • 中括号是让你修改为你自己的文件名。比如: tar -zxPf 20181003013001.tgz.enc
      秋水逸冰6年前(2018-10-07)回复
  5. 备份功能太棒了,正是想要的,能备份指定数据库和指定目录,太感谢了。 期待升级到一键解压恢复指定数据库和指定目录。
    rs6年前(2018-09-04)回复
  6. 大侠,怎么看不到脚本的下载链接?
    free6年前(2018-05-06)回复
    • 眼睛不好得治
      z6年前(2018-08-06)回复
  7. Failed to upload file: googleapi: Error 403: Rate Limit Exceeded, rateLimitExceeded 2018-04-02 02:00:09 Error: Tranferring backup file to Google Drive failed 使用cron备份有以上报错,无法上传到google drive。手动执行没问题。
    12346年前(2018-04-02)回复
  8. for db in ${MYSQL_DATABASE_NAME[*]} 这个地方加引号区别好大,加引号用@就好了。
    西湖看雪6年前(2018-01-30)回复
  9. BACKUP=(${BACKUP[*]} ${DBFILE}) 这个是意思是往数组添加数据吗!所有地方就这看懵了
    西湖看雪6年前(2018-01-29)回复
    • 意思是往数组里添加数据,得到的还是数组。
      秋水逸冰6年前(2018-01-29)回复
  10. 备份所有mysql库的时候,能不能按照每个单独的库分离开,而不要备份成一个整的SQL?
    cookie6年前(2018-01-18)回复
  11. 问个问题想设置一些例外的文件不加到备份里面要怎么修改?
    lalala6年前(2018-01-11)回复
    • 我也想问一下。。。
      12346年前(2018-01-14)回复
  12. Dec 18 15:14:02 izt4[1233]: (root) END EDIT (root) Dec 18 15:14:02 izt4[1233]: PAM pam_end: NULL pam handle passed Centos 7手动运行可以,crontab就不行,查看日志有这个提示,求助怎么解决这个问题。
    灰烬使者6年前(2017-12-18)回复
  13. LOCALAGEDAILIES 这个可以设置成小时吗
    koes6年前(2017-11-22)回复
  14. $ sudo ./backup.sh 2017-11-21 22:20:17 Backup progress start 2017-11-21 22:20:17 mysql is not installed. Install it and try again 秋老大,我没有安装MYSQL(我安装的dokuwiki不需要)。难道备份MYSQL是必选项嘛? 期待解答,谢谢!
    小于同学6年前(2017-11-21)回复
    • 当初写的时候就是为了备份 MySQL 的,所以就强制检查 mysql 命令了。 修改脚本里的这一行 BINARIES=( cat cd du date dirname echo openssl mysql mysqldump pwd rm tar ) 改为 BINARIES=( cat cd du date dirname echo openssl pwd rm tar )
      秋水逸冰6年前(2017-11-23)回复
  15. VPS小白想问,备份好以后VPS出事了,怎么还原? 或者要是日后我换VPS,是不是配好环境和脚本,然后上传备份文件,还原,再改下DNS解析,基本上就完成更换了?
    FNXF7年前(2017-10-26)回复
    • 文件还原,数据库还原,再改DNS,基本上就是这个步骤
      秋水逸冰7年前(2017-10-27)回复