用rsync结合inotify实现数据实时备份

系统环境:centos 6.4

需要软件:inotify,rsync

主机规划:172.16.1.220   172.16.1.218

需求:将172.16.1.218上面的/usr/local/218backup文件夹下面的数据实时同步到/usr/local/220backup文件夹下面,(生产环境慎用,因为一台服务器上面的数据丢失,可能导致远程备份服务器上面的数据也丢失)。

步骤:

首先在两台主机上面分别安装rsync软件,然后在客户端,也就是218上面安装inotify软件

在172.16.1.218主机上:

[r[email protected] rsyncd]# ls
rsyncd.secrets  rsyncd.secretsbak
[[email protected] rsyncd]# pwd
/etc/rsyncd

[[email protected] rsyncd]# vim rsyncd.secrets

12345678

[[email protected] rsyncd]#chmod 600 /etc/rsyncd/rsyncd.secrets

安装inotify软件,安装在configure及编译路径指向/usr/local/inotify下面

源码安装编译,直到OK

OK之后,inotify文件夹下会有四个目录,如下:

[[email protected] inotify]# ls
bin        include       lib       logs

bin目录下有两个命令:

[[email protected] bin]# ls
inotifywait      inotifywatch

安装已经OK了,下面需要编写同步脚本,脚本如下:

[[email protected] local]# vim inotify_rsync.sh

#!/bin/sh
#date:2013-1-11
#function:rysnc 172.16.1.218  to  172.16.1.220
if [ ! -f /etc/rsyncd/rsyncd.secrets ];then
        echo "12345678">/etc/rsyncd/rsyncd.secrets
        /bin/chmod 600 /etc/1.pas
fi
log=/usr/local/inotify/logs/rsync.log
src="/usr/local/218backup/"
host="172.16.1.220"
module="220backup"
 
/usr/local/inotify/bin/inotifywait -mr --timefmt ‘%d/%m/%y %H:%M‘ --format ‘%T %w %f‘ -e close_write,modify,delete,create,attrib $src |  while read DATE TIME DIR FILE; do
 
       FILECHANGE=${DIR}${FILE}
 
       /usr/bin/rsync -avH --delete  --progress --password-file=/etc/rsyncd/rsyncd.secrets $src  --exclude-from="/usr/local/inotify/logs/rules.txt" [email protected]$host::$module &
       echo "At ${TIME} on ${DATE}, file $FILECHANGE was backed up via rsync" >> $log
done

在主机220上面需要做如下配置:

首先:安装好rsync软件,确认无误后启动程序

[[email protected]]#rsync --daemon

[[email protected] 220backup]# netstat -antup|grep 873
tcp        0      0 0.0.0.0:873                 0.0.0.0:*                   LISTEN      9857/rsync         
tcp        0      0 :::873                      :::*                        LISTEN      9857/rsync

873端口已经开启了,代表rsync安装成功。

它的配置文件需要手动建立,如下所示。

[[email protected] 220backup]# vim /etc/rsyncd.conf

pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
port = 873
read only = no
max connections = 10
uid = root
gid = root
use chroot = yes
auth users = rsync
secrets file = /etc/rsyncd/rsyncd.secrets
[apache]
hosts allow = 172.16.1.0/24
path = /usr/local/backup/
[220backup]
path = /usr/local/220backup/
hosts allow = 172.16.1.0/24
#[blogweb02]
#hosts allow = 192.168.71.0/24
#path = /usr/local/apache2/htdocs/
#[bbs-nginx]
#hosts allow = 192.168.71.0/24
#path = /usr/local/apache2/htdocs/

同步之前先在218上面开启同步脚本,脚本路径在/usr/local/inotify_rsync.sh

[[email protected] 218backup]# pwd               却换到218backup文件夹下
/usr/local/218backup

[[email protected] 218backup]# touch {1..100}
[[email protected] 218backup]# ls
1    12  16  2   23  27  30  34  38  41  45  49  52  56  6   63  67  70  74  78  81  85  89  92  96
10   13  17  20  24  28  31  35  39  42  46  5   53  57  60  64  68  71  75  79  82  86  9   93  97
100  14  18  21  25  29  32  36  4   43  47  50  54  58  61  65  69  72  76  8   83  87  90  94  98
11   15  19  22  26  3   33  37  40  44  48  51  55  59  62  66  7   73  77  80  84  88  91  95  99
在这个目录下面建立100个文件

然后在220上面登录,查看/usr/local/220backup文件夹下面是否有文件

[[email protected] 220backup]# ifconfig
eth0      Link encap:Ethernet  HWaddr 00:0C:29:7B:72:F9 
          inet addr:172.16.1.220  Bcast:172.16.1.255  Mask:255.255.255.0
          inet6 addr: fe80::20c:29ff:fe7b:72f9/64 Scope:Link
          UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1
          RX packets:10652680 errors:0 dropped:0 overruns:0 frame:0
          TX packets:5458288 errors:0 dropped:0 overruns:0 carrier:0
          collisions:0 txqueuelen:1000
          RX bytes:15093282373 (14.0 GiB)  TX bytes:323043775 (308.0 MiB)

lo        Link encap:Local Loopback 
          inet addr:127.0.0.1  Mask:255.0.0.0
          inet6 addr: ::1/128 Scope:Host
          UP LOOPBACK RUNNING  MTU:16436  Metric:1
          RX packets:264 errors:0 dropped:0 overruns:0 frame:0
          TX packets:264 errors:0 dropped:0 overruns:0 carrier:0
          collisions:0 txqueuelen:0
          RX bytes:18961 (18.5 KiB)  TX bytes:18961 (18.5 KiB)

[[email protected] 220backup]# pwd
/usr/local/220backup
[[email protected] 220backup]# ls
1    12  16  2   23  27  30  34  38  41  45  49  52  56  6   63  67  70  74  78  81  85  89  92  96
10   13  17  20  24  28  31  35  39  42  46  5   53  57  60  64  68  71  75  79  82  86  9   93  97
100  14  18  21  25  29  32  36  4   43  47  50  54  58  61  65  69  72  76  8   83  87  90  94  98
11   15  19  22  26  3   33  37  40  44  48  51  55  59  62  66  7   73  77  80  84  88  91  95  99

同时,在172.16.1.220下面也建立了100个文件,实验成功。

然后尝试在172.16.1.218下面的/usr/local/218backup文件夹下删除所有的文件。

[[email protected] 218backup]# rm -f *
[[email protected] 218backup]# ls

在查看220backup下面的文件是否还存在

[[email protected] 220backup]# ls
[[email protected] 220backup]#

220backup下面的文件已经被同步删除了,实验成功。

QQ交流:406564728

时间: 2024-08-24 19:12:46

用rsync结合inotify实现数据实时备份的相关文章

通过rsync+inotify实现数据实时备份同步

一.环境描述 测试环境 需求:服务器A与服务器B为主备服务模式,需要保持文件一致性,现采用sersync基于rsync+inotify实现数据实时同步 环境描述: 主服务器172.26.7.50 ,从服务器172.26.7.51 实时同步/home/ 及/download 目录到从服务器 二.实施方法 1.从服务器172.26.7.51 rsync服务搭建 1.1下载软件包至从服务器 下载地址:http://rsync.samba.org/ftp/rsync/src 可根据环境需求下载相应的软件

rsync与inotify实现数据实时同步

Rsync与Inotify 单一的rsync只可以进行数据同步,单一的inotify只可以实时监控文件,两者结合使用刚好满足数据实时同步的需求,下面就用一个数据发布服务器和两个web服务器实例解析rsync+inotify实现实时同步. 数据发布服务器 192.168.1.5 (rsync+inotify) web服务器 192.168.1.6 192.168.1.7 (rsync) 首先在web服务器上部署rsync 192.168.1.6配置 [[email protected]~]# yu

使用php结合rsync、inotify实现的实时备份脚本!

1. php脚本 <?php           #解析配置文件      $arr=parse_ini_file('config.ini',true);      #获取符合"监控"要求的目录格式的路径            $dirListen=implode(' ',$arr['srcdir']);      # 获取符合"同步目录"要求的格式的目录路径      $sdDir=dir_path_parse($arr['srcdir'],$arr['ds

sersync基于rsync+inotify实现数据实时同步

一.环境描述 需求:服务器A与服务器B为主备服务模式,需要保持文件一致性,现采用sersync基于rsync+inotify实现数据实时同步 主服务器A:192.168.1.23 从服务器B:192.168.1.243 实时同步/var/atlassian目录到从服务器. 二.实施 1.从服务器192.168.1.243 rsync服务搭建 1.1安装软件包 wget http://rsync.samba.org/ftp/rsync/src/rsync-3.1.1.tar.gz tar xf r

基于rsync+inotify实现数据实时同步传输

前言 与传统的cp.tar备份方式相比,rsync具有安全性高.备份迅速.支持增量备份等优点,通过rsync可以解决对实时性要求不高的数据备份需求,但随着文件数量的增大和实时同步的要求,rsync已不能满足需求,随之rsync+inotify便应运而生.本文将讲解rsync的基础知识和如何基于rsync+inotify实现数据实时同步传输. rsync相关介绍 rsync(remote sync)是一款快速增量备份工具(远程同步),支持本地复制,或者与其他SSH(安全传输).rsync主机同步.

CentOS6.6 rsync+inotify实现数据时时备份

rsync+inotify实现数据时时备份 注意:rsync的daemon模式已提前配置好了,只需要配置inotify即可. 基本环境   系统版本 主机名 IP地址 角色 备份/监控目录 CentOS  6.6 backup 10.0.0.10 rsync服务端 /backup CentOS  6.6 nfs-server 10.0.0.7 rsync客户端 /data inotify安装配置 查看系统是否支持inotify,显示以下三个文件表示支持 [[email protected] to

利用rsync+inotify实现数据实时同步脚本文件

将代码放在Server端,实现其它web服务器同步.首先创建rsync.shell,rsync.shell代码如下: #!/bin/bash host1=133.96.7.100 host2=133.96.7.101 host3=133.96.7.102 src=/data/www/ dst1=web1 dst2=web2 dst3=web3 user1=web1 user2=web2 user3=web3 /usr/local/inotify/bin/inotifywait -mrq --ti

[转帖]sersync基于rsync+inotify实现数据实时同步

sersync基于rsync+inotify实现数据实时同步 https://www.jianshu.com/p/d532a34e5cc5 前言 提到数据同步就必然会谈到rsync,一般简单的服务器数据传输会使用ftp/sftp等方式,但是这样的方式效率不高,不支持差异化增量同步也不支持实时传输. 原文地址:https://www.cnblogs.com/nbxcnxvcnb/p/12393252.html

老男孩教育运维班100台规模集群存储系统搭建及数据实时备份上机实战

老男孩教育运维班0基础起步上机实战系列项目 老男孩教育运维班100台规模集群存储系统搭建及数据实时备份上机实战 项目要求: 1.全体学员上机实践考试,完成后由排长或班长.或助教打分. 2.时间:90分钟,抄袭0分. (一)上机服务器业务及IP主机名规划 已知4台服务器主机名主机对应信息见下表: 服务器说明 外网IP 内网IP 主机名 apache web服务器 10.0.0.7/24 172.16.1.7/24 web02 nginx web服务器 10.0.0.8/24 172.16.1.8/