通过rsync实现服务器之间同步、备份

rsync是类unix系统下的数据镜像备份工具。一款快速增量备份工具,支持本地复制,或者与其他SSH、rsync主机同步。


需求:把server06服务器上的某些数据定期备份到server05服务器中

服务器 IP地址 备注
server06 (centos6.6) 192.168.10.66 rsync服务器
server05 (centos6.6) 192.168.10.65 rsync客户端

server06服务器设置:

[[email protected] ~]#yum install -y rsync

[[email protected] ~]#rpm -qa | grep rsync

[[email protected] ~]#vim /etc/xinetd.d/rsync

        disable = no         #yes改成no ,开启rsync

[[email protected] ~]#chkconfig rsync on    #设置开机启动

[[email protected] ~]#chkconfig --list rsync

生成配置文件

[[email protected] ~]#vim /etc/rsyncd.conf

         uid = root    #这里指定的用户名和用户组是root,权限过高了,出于安全考虑可以用别的
         gid = root
         port = 873                                   # 默认端口873
         hosts allow = 192.168.10.0/24                #允许同步的客户端主机
        
         pidfile = /var/run/rsyncd.pid               #pid文件路径
         lockfile = /var/run/rsync.lock              
         logfile = /var/log/rsyncd.log               #日志文件路径
 
         [test]                                      #模块参数名称
         path = /root/aaa                            #要同步的目录
         comment = rsync test!                        #注释信息
         ignore errors                                #忽略IO错误
         read only = yes                              #是否只读 yes或者no
         list = no                                    #不允许列文件
         auth users = rsync                           #认证用户名
         secrets file = /etc/rsync.passwd             #认证用户名对应密码存放位置

创建认证文件

[[email protected] ~]#vim /etc/rsync.passwd

         rsync:rsync  #账号和密码

[[email protected] ~]#chmod 600 /etc/rsync.passwd   #必须修改权限,否则报错

启动服务

[[email protected] ~]#/usr/bin/rsync --daemon        #注意:这里是daemon不是deamon!!!!

[[email protected] ~]#ss -tnl        #查看是否监听873端口

[[email protected] ~]#lsof -i:873    #查看873端口被什么进程占用

server05客户端设置

[[email protected] ~]#rsync -vzrtopg --progress --delete [email protected]::test /var/www

#输入密码,即可抓取A服务器指定目录的文件,下载到本地 /var/www目录中

#如果想要将客户端文件同步到服务器,需要修改服务器/etc/rsyncd.conf文件,read only = yes 改为no,否则没有权限上传;

[[email protected] ~]#rsync -vzrtopg --progress /var/www [email protected]::test   #将/var/www内容上传到服务器

server05客户端同步免输入密码

[[email protected] ~]# vim /etc/rsync.passwd

 rsync   #这里客户端和服务器的rsync.passwd设置的密码一致

[[email protected] ~]# chmod 600 /etc/rsync.passwd

[[email protected] ~]# rsync -vzrtopg --progress --delete --password-file=/etc/rsync.passwd [email protected]::test /var/www

server05客户端自动运行脚本实现同步

[[email protected] ~]# vim /root/rsync.sh

#!/bin/bash
/usr/bin/rsync-vzrtopg --progress --delete --password-file=/etc/rsync.passwd  [email protected]::test /var/www

[[email protected] ~]# crontab -e  #添加任务计划

*/10 * * * *    /root/rsync.sh              # 每隔10分钟执行一次

在server06服务器尝试关闭rsync服务:

[[email protected] ~]# ps aux | grep rsync

root      1941  0.0  0.0 107620   688 ?        Ss   17:15   0:00 rsync --daemon

root      1990  0.0  0.0 103244   856 pts/0    S+   17:31   0:00 grep rsync

[[email protected] ~]# kill 1941  #kill + pid号,杀死进程

[[email protected] ~]# ss -tnl  #现在已经没有监听873端口了

[[email protected] ~]# rsync --daemon   #启动rsync

客户端同步命令,参数解释

v, –verbose 详细模式输出

-q, –quiet 精简输出模式

-c, –checksum 打开校验开关,强制对文件传输进行校验

-a, –archive 归档模式,表示以递归方式传输文件,并保持所有文件属性,等于-rlptgoD

-r, –recursive 对子目录以递归模式处理

-R, –relative 使用相对路径信息

rsync foo/bar/foo.c remote:/tmp/

则在/tmp目录下创建foo.c文件,而如果使用-R参数:

rsync -R foo/bar/foo.c remote:/tmp/

则会创建文件/tmp/foo/bar/foo.c,也就是会保持完全路径信息。

-b, –backup 创建备份,也就是对于目的已经存在有同样的文件名时,将老的文件重新命名为~filename。可以使用–suffix选项来指定不同的备份文件前缀。

–backup-dir 将备份文件(如~filename)存放在在目录下。

-suffix=SUFFIX 定义备份文件前缀

-u, –update 仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件。(不覆盖更新的文件)

-l, –links 保留软链结

-L, –copy-links 想对待常规文件一样处理软链结

–copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结

–safe-links 忽略指向SRC路径目录树以外的链结

-H, –hard-links 保留硬链结

-p, –perms 保持文件权限

-o, –owner 保持文件属主信息

-g, –group 保持文件属组信息

-D, –devices 保持设备文件信息

-t, –times 保持文件时间信息

-S, –sparse 对稀疏文件进行特殊处理以节省DST的空间

-n, –dry-run现实哪些文件将被传输

-W, –whole-file 拷贝文件,不进行增量检测

-x, –one-file-system 不要跨越文件系统边界

-B, –block-size=SIZE 检验算法使用的块尺寸,默认是700字节

-e, –rsh=COMMAND 指定替代rsh的shell程序

–rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息

-C, –cvs-exclude 使用和CVS一样的方法自动忽略文件,用来排除那些不希望传输的文件

–existing 仅仅更新那些已经存在于DST的文件,而不备份那些新创建的文件

–delete 删除那些DST中SRC没有的文件

–delete-excluded 同样删除接收端那些被该选项指定排除的文件

–delete-after 传输结束以后再删除

–ignore-errors 及时出现IO错误也进行删除

–max-delete=NUM 最多删除NUM个文件

–partial 保留那些因故没有完全传输的文件,以是加快随后的再次传输

–force 强制删除目录,即使不为空

–numeric-ids 不将数字的用户和组ID匹配为用户名和组名

–timeout=TIME IP超时时间,单位为秒

-I, –ignore-times 不跳过那些有同样的时间和长度的文件

–size-only 当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间

–modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口,默认为0

-T –temp-dir=DIR 在DIR中创建临时文件

–compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份

-P 等同于 –partial

–progress 显示备份过程

-z, –compress 对备份的文件在传输时进行压缩处理

–exclude=PATTERN 指定排除不需要传输的文件模式

–include=PATTERN 指定不排除而需要传输的文件模式

–exclude-from=FILE 排除FILE中指定模式的文件

–include-from=FILE 不排除FILE指定模式匹配的文件

–version 打印版本信息

–address 绑定到特定的地址

–config=FILE 指定其他的配置文件,不使用默认的rsyncd.conf文件

–port=PORT 指定其他的rsync服务端口

–blocking-io 对远程shell使用阻塞IO

-stats 给出某些文件的传输状态

–progress 在传输时现实传输过程

–log-format=formAT 指定日志文件格式

–password-file=FILE 从FILE中得到密码

–bwlimit=KBPS 限制I/O带宽,KBytes per second

-h, –help 显示帮助信息

时间: 2024-10-13 03:14:13

通过rsync实现服务器之间同步、备份的相关文章

使用rsync实现服务器数据同步备份

使用rsync实现数据实时同步备份 实验目标 rsync 远程同步 实战1: 备份/var/www/html 目彔 实战2: 使用ssh密钥实现无交互备份 实战3: 配置rsync 服务器及需要备份的目彔,不使用系统用户 实战4: 配置rsync+inotify实时同步 实战5: 防止网页被篡改 实验概述 软件简介 Rsync ( Remote sync)是一个远程数据同步工具,使用与unix/Linux/windows等多种平台.  可通过LAN/WAN 快速同步多台主机间的文件.Rsync

sersync2+rsync目录文件实时同步备份

说明: 192.168.1.2(sersync+rsync)---------------FTP 192.168.1.3(rsync)--------------------------backup 实验目的: 实时自动同步:192.168.1.2 ------->192.168.1.3到目录:/data/ftpdata ; 764  viconfxml.xml 765  ./GNU-Linux-x86/sersync2 -d -r confxml.xml 767  ./GNU-Linux-x8

rsync+inotify 数据实时同步备份

一.rsync rsync - a fast, versatile, remote (and local) file-copying tool. rsync synopsis: rsync 支持三种传输模式: local    本地 remote shell   (ssh, rsh) rsync daemon rsync连接远程主机进行同步或备份时有两种途径:使用远程shell程序(如ssh或rsh)进行连接,或使用TCP直接连接rsync daemon.    当源路径或目的路径的主机名后面包

实战:配置rsync+inotify实现实时同步备份

实战:配置rsync+inotify实现实时同步 Linux内核从2.6.13版本开始提供了inotify通知接口,用来监控文件系统的各种变化情况,如文件存取.删除.移动等.利用这一机制,可以非常方便地实现文件异动告警.增量备份,并针对目录或文件的变化及时作出响应. 使用rsync工具与inotify机制相结合,可以实现触发式备份(实时同步),只要原始位置的文档发生变化,则立即启动增量备份操作,否则处于静态等侍状态,这样一来,就避免了按固定周期备份进存在的延迟性.周期过密等问题. inotify

Centos rsync+inotify 实现数据同步备份

最近公司做了一??分布式,便于管理安装了 server: 192.168.2.29 client: 192.168.2.230 先来配置client 安装就不介绍了 [[email protected]-tracker-230 rsync]# ll total 16 drwxr-xr-x. 2 root root 4096 Nov 13 04:23 bin -rw-r--r--. 1 root root 405 Nov 14 01:19 rsyncd.conf -rw-------. 1 roo

inotify介绍及rsync + inotify 实时同步备份

1.前言 rsync (remote sync)是一款非常好的数据同步工具,能够通过对比同步双方的数据变动,实现增量同步,还可以通过LAN/WAN实现远程多台主机间文件的同步,还能结合crond任务计划来执行自动备份,又可以结合ssh实现远程数据备份的安全,种种特性使他看起来相当优秀.但如果需备份数据十分庞大时,它的不足之处就显现出来了,比如每次执行同步操作时,rsync都会扫描全部数据进而计算出增量部分,而后再同步增量数据,这将会十分耗时,使其变得低效:并且受限于crond计划任务最小时间间隔

集群服务器Session同步及一种基于Memcached的session同步

1 Session的集群管理 事实上,网站总是有状态的.每一个登录信息.用户信息常常被存储在session内部.而当一个网站被部署在不止一台服务器的时候,就会遇到session同步的问题.事实上即使一个很小的网站,也要至少有两台服务器互为备份,分单流量是必须得,更重要的是无缝切流量升级.为了保证服务的不间断又要进行网站的维护升级,切流量是最简单的.那么如何保证切流量的时候session也会跟着同步过去呢?在集群环境下,大致有以下几种手段 1.1 Session复制 这是一种在早期应用系统中使用较

在freeBSD服务器之间搭建ssh无密码登录

一般情况下,通过ssh方式登录到freeBSD服务器上,都需要输入登录密码.但是,有时候一些服务需要采用无密码方式登录,比如服务器之间同步文件,发布文件等.这时候就可以采用ssh的公私钥方式来实现无密码登录.假设有两台服务器A和B,在A服务器下用户为a,要以B服务器下b用户身份实现无密码登录. 1.以a用户身份登录的A服务器 2.利用ssh-keygen -t rsa 生成一对公私钥,缺省是存放在/home/a/.ssh/下面,其中id_rsa是私钥,id_rsa.pub是公钥. 3.把id_r

rsync+inotify 实现服务器之间目录文件实时同步(转)

软件简介: 1.rsync 与传统的 cp. tar 备份方式相比,rsync 具有安全性高.备份迅速.支持增量备份等优点,通过 rsync 可 以解决对实时性要求不高的数据备份需求,例如定期的备份文件服务器数据到远端服务器,对本地磁盘定 期做数据镜像等. 随着应用系统规模的不断扩大,对数据的安全性和可靠性也提出的更好的要求,rsync 在高端业务系统中 也逐渐暴露出了很多不足,首先,rsync 同步数据时,需要扫描所有文件后进行比对,进行差量传输.如 果文件数量达到了百万甚至千万量级,扫描所有