服务器其它

关注公众号 jb51net

关闭
首页 > 网站技巧 > 服务器 > 服务器其它 > rsync备份服务器数据

rsync备份服务器数据最新实战指南

作者：鱼不知忆

本项目通过rsync实现Web服务器每日0点备份配置文件、网站目录及日志至备份服务器,本地保留7天,备份服务器保存6个月内每周一数据,需验证完整性并发送邮件通知结果,本文给大家介绍的非常详细,感兴趣的朋友跟随小编一起看看吧

项目描述

某公司里有一台Web服务器，里面的数据很重要，但是如果硬盘坏了数据就会丢失，现在领导要求把数据做备份，这样Web服务器数据丢失在可以进行恢复，要求如下：
每天晚上00点整在Web服务器A上打包备份系统配置文件、网站程序目录及访问日志并通过rsync命令推送到服务器B上备份保留

（备份思路可以是先在本地按日期打包，然后再推到备份服务器B上）。

已知2台服务器主机名分别为master,slave，主机信息建下表。

服务器说明IPOS主机名称
Nginx web服务器192.168.3.1CentOS 7.6master
Rsync备份服务器192.168.3.2CentOS 7.6slave

1、备份要求
每天晚上00点整在Web服务器上打包备份系统配置文件、网站程序目录及访问日志并通过rsync命令推送到备份服务器上备份保留。
2、备份思路
可以是先在本地按日期打包，然后再推送到备份服务器上；

项目备份需求

1）所有服务器的备份目录必须都为/backup。
2）要备份的系统配置文件包括但不限于：

3）Web服务器站点目录假定为/var/www/html/，如果没有，可以先模拟创建。
4）Web服务器访问日志路径假定为/app/logs，如果没有，可以先模拟创建。
5）Web服务器本地保留打包后的7天备份数据即可（本地留存不能多于7天，因为数据太多硬盘会满）。
6）备份服务器上，保留最近7天所有备份数据，保留6个月内每周一的所有数据副本。
7）备份服务器上，要按照备份数据服务器内网IP为目录保存备份，备份的文件按照时间、名称保存。
8）需要确保备份的数据尽量完整准确，在备份服务器上对备份的数据是否完整进行检查。
9）备份服务器上，每天早晨8:00把备份成功或失败结果信息发送到系统管理员邮箱里。

服务器说明备份目录目录说明备注
all server/backup备份目录统一服务器本地备份目录，便于管理
all server/var/spool/cron/root定时任务服务配置文件
all server/etc/rc.local开机自启动配置文件
all server/server/scripts日常脚本目录统一服务器本地脚本目录，便于管理
Web server/var/www/htmlweb服务器站点目录mkdir -p /var/www/html
Web server/app/logsweb服务器访问日志路径mkdir -p /app/logs

项目实施

任务一：服务器创建

初始化2台服务器并将其作为备份方案测试服务器

按照规划，最小化部署系统，关闭防火墙，禁用SELinux，确保能够联网。

任务二：服务器部署

（1）搭建备份服务器

（2）Web服务器搭建部署

1、在备份服务器上部署Rsync服务

# 1、安装rsync
[root@slave ~]# yum install -y rsync
# 2、配置文件
[root@slave ~]# vim /etc/rsyncd.conf
uid = rsync							# 用户
gid = rsync							# 组
use chroot = no						# 程序安全设置
max connections = 200				# 客户端连接数
timeout = 300						# 超时时间
pid file = /var/run/rsyncd.pid		# 进程号文件位置
lock file = /var/run/rsync.lock		# 进程锁
log file = /var/log/rsyncd.log		# 日志文件
fake super = yes 					# 无需rsync以root身份运行，允许接受数据
[backup]
        path = /backup						# 目录
        ignore errors						# 有错误时忽略
        read only = false					# 可读可写
        list = false						# 阻止远程列表（不让通过远程方式看服务端有啥）
        hosts allow = 192.168，3.0/24		# 允许IP
        hosts deny = 0.0.0.0/32				# 禁止IP
        auth users = rsync_backup			# 虚拟用户
        secrets file = /etc/rsync.password	# 存放用户和密码的文件
# 3、创建rsync账户及共享目录并修改目录属主为rsync
[root@slave ~]# useradd -M -s /sbin/nologin rsync
[root@slave ~]# mkdir /backup
[root@slave ~]# chown -R rsync /backup
# 4、启动服务
[root@slave ~]# systemctl enable --now rsyncd
[root@slave ~]# ps -ef | grep rsync
# 5、创建rsync虚拟账户名和密码,并赋予密码文件600权限
[root@slave ~]# echo "rsync_backup:123456" > /etc/rsync.password
[root@slave ~]# chmod 600 /etc/rsync.password

2、客户端本地开发打脚本

Nginx webserver本地打包备份脚本实现。
1）Web01服务器待备份信息。

[root@master ~]# mkdir /var/html/www -p
[root@master ~]# touch /var/html/www/{1..3}.txt
[root@master ~]# mkdir /app/logs -p
[root@master ~]# touch /app/logs/{a..c}.log
[root@master ~]# echo "123456" > /etc/rsync.password
[root@master ~]# chmod 600 /etc/rsync.password
[root@master ~]# tree /var/html/www
/var/html/www
├── 1.txt
├── 2.txt
└── 3.txt
0 directories, 3 files
[root@master ~]# tree /app/logs/
/app/logs/
├── a.log
├── b.log
└── c.log
0 directories, 3 files
# 2、编写备份脚本
[root@master scripts]# vim backup.sh
#!/bin/bash
Date=$(date +%F)         # 定义时间方式
Host_IP=192.168.3.1         # 可以有多种方法，能获取IP即可
Backup_Dir="/backup/"            # 本地备份路径
Backup_Server_IP=192.168.3.2 # 备份服务器的IP
[ ! -d $Backup_Dir/$Host_IP ] && mkdir -p $Backup_Dir/$Host_IP    # 创建指定目录和IP的目录
echo ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz
# 按要求打包备份所有本地重要文件
cd / &&\
tar cf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz var/spool/cron/root &&\
tar rf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz etc/rc.d/rc.local &&\
tar rf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz server/scripts/ &&\
tar zcf $Backup_Dir$Host_IP/www_${Date}_tar.gz var/html/www/ &&\
tar zcf $Backup_Dir$Host_IP/app_logs_${Date}_tar.gz app/logs/ &&\
# 提示：在NFS服务器客户端上不用编写压缩Web服务器的程序与日志目录
# 给所有备份的压缩文件建立指纹，放入指纹库flag，后面会验证完整性
find ${Backup_Dir:-/tmp} -type f -name "*${Date}_tar.gz" |xargs md5sum >$Backup_Dir/$Host_IP/${Date}.flag
# 把备份推送到备份服务器
rsync -az $Backup_Dir rsync_backup@${Backup_Server_IP}::backup --password-file=/etc/rsync.password
# 删除7天以前的所有本地备份数据
find ${Backup_Dir:-/tmp} -type f -name "*.tar.gz" -a -name "*flag*" -mtime +7|xargs rm -f

3、配置定时任务

1）编辑定时任务，实现每天00:00定时备份本地数据，并推送到备份数据Rsync服务器上。
[root@master scripts]# crontab -e    ---编辑定时任务，添加如下内容
#crond-od-002:data backup
00 00 * * * /bin/sh /server/scripts/backup.sh >/dev/null 2>&1
2）编辑服务端删除文件脚本文件，删除180天前的所有备份数据，但保存每周一的。
[root@slave ~]# mkdir -p /server/scripts
[root@slave ~]# cd /server/scripts/
[root@slave scripts]# vim /server/scripts/del_bak_data.sh
#!/bin/bash
Backup_Dir="/backup/"
#删除7天前的压缩包和flag文件，但是每周一的不删
find ${Backup_Dir:-/tmp} -type f  -name "*tar.gz*" ! -name "*Week01*" -o -name "*flag*" -mtime +7|xargs rm -f
#删除180天前的所有压缩包和flag文件
find ${Backup_Dir:-/tmp} -type f -name "*tar.gz*" -name "*flag*" -mtime +180|xargs rm -f
3）配置定时任务，实现服务端180天前数据自动删除。
[root@slave scripts]# crontab -e
#crond-id-002:data backup
00 00 * * * /bin/sh /server/scripts/del_bak_data.sh >/dev/null 2>&1

4、数据传输完整性验证与监控告警

服务端针对客户端备份时的md5指纹数据，利用MD5命令进行验证，完成数据传输过程完整性验证。

[root@slave scripts]# vim send_mail.sh 
#!/bin/bash
Date=$(date +%F)
Backup_Dir="/backup/"
Check_Log="/tmp/bak.log_$(date +%F)"    # 定时检查备份结果的文件
Admin_Mail=esen_monitor@163.com    # 管理员邮箱，建议使用163
find $Backup_Dir -type f -name "${Date}.flag"|xargs md5sum -c >>$Check_Log
if [ -n "cat $Check_Log" ]
then
    mail -s "$Date backup data info" $Admin_Mail <$Check_Log
else
    echo "$Date backup data error,pls check it." >$Check_Log    # 如果结果文件不存在，日志信息变化，报错
    mail -s "$Date backup data info" $Admin_Mail <$Check_Log
fi
cp $Check_Log{,.ori} && >$Check_Log

5、配置mail使用外部SMTP发邮件

安装mailx
[root@slave ~]# yum install -y mailx
编辑/etc/mail.rc配置文件
[root@slave ~]# vim /etc/mail.rc    # 在最后一行加入如下内容
set from=xxxxx@163.com
set smtp=smtps://smtp.163.com:465
set smtp-auth-user=xxxxx@163.com
set smtp-auth-password=*****    ###该密码是在网易邮箱中申请的第三方客户端密码，不是账户的登陆密码。
set smtp-auth=login
set ssl-verify=ignore
set nss-config-dir=/root/.certs

6、最后进行邮件测试

到此这篇关于rsync备份服务器数据最新实战指南的文章就介绍到这了,更多相关rsync备份服务器数据内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:
阅读全文