如何使用rsync备份

已知3台服务器主机名分别为web01、backup 、nfs主机信息见下表:

角色      外网IP(NAT)           内网IP(LAN)               主机名
WEB         eth0:10.0.0.7       eth1:172.16.1.7         web01
NFS         eth0:10.0.0.31      eth1:172.16.1.31        nfs
Rsync       eth0:10.0.0.41      eth1:172.16.1.41        backup
客户端:  web    nfs
服务端:  backup
客户端需求
1.客户端提前准备存放的备份的目录,目录规则如下:/backup/nfs_172.16.1.31_2018-09-02
2.客户端在本地打包备份(系统配置文件、应用配置等)拷贝至/backup/nfs_172.16.1.31_2018-09-02
3.客户端最后将备份的数据进行推送至备份服务器
4.客户端服务器本地保留最近7天的数据, 避免浪费磁盘空间
4.客户端每天凌晨1点定时执行该脚本
服务端需求
1.服务端部署rsync,用于接收客户端推送过来的备份数据
2.服务端需要每天校验客户端推送过来的数据是否完整
3.服务端需要每天校验的结果通知给管理员
4.服务端仅保留6个月的备份数据,其余的全部删除

注意:所有服务器的备份目录必须都为/backup

快递:  散货-------->打包--->标记------->装车-------------->运输------------->仓库
       验货-------->评价

系统:  备份的文件-->打包--->校验值----->备份至本地目录---->网络-------->推送至备份服务器
       管理员校验-->通知--->邮件
1.你需要备份什么?
    /etc/fstab /etc/hosts /etc/passwd /var/spool/cron/

2.你要备份到哪里?

    /backup/nfs_172.16.1.31_2018-09-02
    IP: ifconfig eth1 | awk 'NR==2 {print $2}'
    host: hostname
    date: date +%F

3.你要推送到哪里?
    172.16.1.41 

客户端

[[email protected] ~]# mkdir /scripts
[[email protected] ~]# cat /scripts/clinet_push_data_server.sh
#!/usr/bin/bash

variables == 变量 ---> 一个固定的字符串表示一个不固定的值

PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin
Src=/backup
Host=$(hostname)
Addr=$(ifconfig eth1 | awk 'NR==2 {print $2}')
Date=$(date +%F)
Dest=${Host}_${Addr}_${Date}

#1.准备对应的备份目录

[ -d $Src/$Dest ] ||  mkdir -p $Src/$Dest

#2.将文件拷贝至备份目录

cd / && [ -f $Src/$Dest/sys.tar.gz ] ||  tar czf $Src/$Dest/sys.tar.gz etc/fstab etc/hosts etc/passwd && [ -f $Src/$Dest/other.tar.gz ] || tar czf $Src/$Dest/other.tar.gz var/spool/cron/ scripts/ && \

#3.添加标记

[ -f $Src/$Dest/flag_${Date} ] ||  md5sum $Src/$Dest/*.tar.gz > $Src/$Dest/flag_${Date}

#4.推送数据至远程仓库

export RSYNC_PASSWORD=123456
rsync -avz $Src/ [email protected]::backup

#5.保留本地最近7+天的数据

find $Src/ -type d -mtime +7 | xargs rm -rf

#批量的模拟数据

[[email protected] ~]# for i in {1..30};do date -s "201909$i"; sh /scripts/clinet_push_data_server.sh ; done

------

#### 

服务端

#1.服务端配置邮件功能

[[email protected] /]# yum install mailx -y
[[email protected] /]# vim /etc/mail.rc       #跳转至最后一行,然后进入编辑模式
set from=发件人@qq.com
set smtp=smtps://smtp.qq.com:465
set smtp-auth-user=发件人@qq.com
set smtp-auth-password=xxxx
set smtp-auth=login
set ssl-verify=ignore
set nss-config-dir=/etc/pki/nssdb/

#2.测试一下是否能发送成功

mail -s "测试一下" 收件人@qq.com < /etc/hosts

#3.编写脚本

[[email protected] ~]# cat /scripts/check_data_notify.sh
#!/usr/bin/bash
PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin
Src=/backup
Date=$(date +%F)

#1.校验每天客户端推送过来的flag数据

md5sum -c ${Src}/*_${Date}/flag_${Date} >${Src}/result_${Date}

#2.邮件通知管理员

mail -s "Rsync Backup ${Date}" 收件人@qq.com < ${Src}/result_${Date}

#3.保留最近180天的数据

find $Src/ -type d -mtime +180 | xargs rm -rf

定时任务是否有问题

客户端

[[email protected] ~]# crontab -l
#定时备份数据
*/1 * * * * sh /scripts/clinet_push_data_server.sh &>/dev/null

服务端

[[email protected] ~]# crontab -l
#定时校验备份的结果
*/1 * * * * sh /scripts/check_data_notify.sh &>/dev/null

如何在增加一台客户端备份

[[email protected] ~]# rsync -avz [email protected]:/scripts /

原文地址:https://www.cnblogs.com/baozexu/p/11479265.html

时间: 2024-10-19 09:30:53

如何使用rsync备份的相关文章

使用rsync备份系统快照

1.将源目录复制到目的端: rsync -av /home/file/data /backup/file/data 2.将数据备份到远程服务器或主机 rsync -av /home/file/data [email protected]:/home/file/data 3.将远程服务器上的数据恢复到本地主机: rsync -av [email protected]:/home/file/data /home/file/data 4.通过网络进行传输时,压缩数据能够显示传输效率,使用-z指定在网络

利用rsync备份生产应用(二)

概述 上节主要是针对rsync服务端进行的配置和详解,本节主要针对在客户端上的rsync配置进行讲解. rsync用法 本地到本地 语法:rsync [OPTION...] SRC... [DEST] 用法示例一:将/home/kl/ss目录里的内容同步到/home/kl/ss_new目录中 [[email protected] ~]$ ls -l 总用量 16 drwxr-xr-x. 4 root root 4096 7月 19 12:23 newss drwxr-xr-x. 4 kl kl

windows下通过rsync备份AD域控文件到linux服务器

需要用到的工具cwrsync:http://down.51cto.com/data/2103716 windows上用到的bat脚本: @echo off set fdate=%date:~0,4%_%date:~5,2%_%date:~8,2%_%time:~0,2%_%time:~3,2%     echo %fdate% ldifde -f %fdate%.ldf move %fdate%.ldf D:\adbackup\addata D:\adbackup\command\cwRsync

Cygwin下使用rsync备份至Linux server时的中文编码问题

14年6月10日 今天在备份数据又出了状况:所有文件名中含有非英文字符的文件都被从Linux server上删除,而当要重新拷贝Windows下该文件时,则显示错误: invalid or incomplete multibyte or wide character 看来是文件名编码出了问题.在Cygwin下查看locale,被设置成了[email protected].而原先设置的是什么也不记得了,但肯定是设置系统locale为Chinese又切换到English造成的.同时发现,date命令

Linux系统日常管理之rsync备份工具

   rsync备份工具 一.scp scp备份工具不可以进行增量备份 1.安装scp [[email protected] ~]# yum install -y openssh-clients 2.scp -r 192.168.21.98:/tmp/a/ ./a/ 从远程主机把/tmp/下面的a目录拷贝到当前目录下 -r:以递归方式复制 3.[[email protected] cheng]# scp 1.txt 192.168.21.98:/root/cheng/ 把当前目录下的文件拷贝到远

利用rsync备份生产应用(一)

rsync简单介绍 Rsync(remote synchronize)是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件.Rsync使用所谓的"Rsync算法"来使本地和远 程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快. Rsync本来是用于替代rcp的一个工具,目前由rsync.samba.org维护,所以rsync.conf文件的格式类似于samba的主配 置文件.Rsync可以通过rsh或ssh使用,也能以

如何使用 rsync 备份 Linux 系统的一些介绍

备份一直是 Linux 世界的热门话题.回到 2017,David Both 为 Opensource.com 的读者在使用 rsync 备份 Linux 系统方面提了一些建议,在这年的更早时候,他发起了一项问卷调查询问大家,在 Linux 中你的 /home 目录的主要备份策略是什么,在今年的另一个问卷调查中,Don Watkins 问到,你使用哪种开源备份解决方案. 我的回复是 rsync.我真的非常喜欢 rsync!市场上有大量大而复杂的工具,对于管理磁带机或者存储库设备,这些可能是必要的

使用rsync备份Windows事件日志

使用rsync备份Windows事件日志 Windows版软件:cwRsyncServer 安装比较简单一直下一步即可,输入到创建账号页面的时候可以自己设置一个密码. 服务器端:cwRsyncServer_4.0.5_Installe.zip 客户端:cwRsync_4.0.5_Installer.zip 由于特殊原因需要收集Windows的Application.Security.Setup.System事件日志,而事件日志的位置是在C:\Windows\System32\winevt\Log

Xtrabackup+Rsync 备份数据库并同步到远端备份机

简单架构: 简单描述: 要备份中间这三台服务器上面的数据库数据到备份机140上:中间这三台服务器是游戏服务器,WEB服务和DB都在一台机器上 最前端是passport服务器,提供玩家的账号相关信息及充值信息等,WEB服务和DB都在一台机器上,需要将数据库数据备份到备份机140上 服务器129对passport服务器的数据库做了mysql的主主同步,这里先忽略 要求: 对游戏服务器和passport服务器的数据库数据,在本地备份,同时备份到远端备份机140上,在本地保留三天,在备份机保留7天 将p

RSYNC备份策略

发布网站前做备份. 备份想放到服务器本身,但rsync的--backup-dir测试发现只能备份到所在module下,无法备份到module之外的位置. rsync不支持远端到远端的备份方式. 想到两种方案: 1. 共享目录挂载到本地,把mudule备份到共享目录,然后发布网站 2. rsync服务端增加backup模块,先取数据到本地,再同步到服务端的backup模块,然后发布网站 此文采用第二种方案. @echo off SET RSYNC=D:\Program Files (x86)\IC