CentOS7+rsync+sersync实现数据实时同步

一、全网数据备份方案

1、需要备份的文件目录有（原则上，只要运维人员写入或更改的数据都需要备份）。/data,/etc/rc.local,/var/spool/cron/root等，根据不同都服务器做不同的调整
2、为了规范化，每台服务器进行本地备份时都备份到/backup目录下
3、每台WEB服务器进行本地备份时，都备份到/backup目录下以本机IP地址命名的目录中
4、打的tar包中需要包含当天的日期
5、统一存储数据备份的服务器统一采用Rsync daemon 方式提供存储备份数据都目录/backup
6、由于WEB服务器本地存储空间有限，需要将超过7天的备份数据删除
7、为了方便知道每次备份是否成功，我们需要做如下操作：
（1、在每台服务器上检查备份是否成功
（2、在存储备份数据的服务器上检查备份数据是否推送成功，并发送邮件到管理员邮箱
8、因为备份服务器空间有限，需要删除超过180天的备份数据，但每周六备份的数据要永久保留

做备份服务需要的基本步骤有：
1、   在Rsync备份服务器上安装，配置Rsync服务，实现推送
2、   在客户端服务器上，实现打包，推送，删除，定时任务推送
3、   在Rsync备份服务器上，做检查，发邮件给管理员
二、搭建Rsync备份服务端
   # rpm -qa rsync    //查看服务是否存在
   # yum install -y rsync    //安装服务
   # yum install -y xinetd   //rsync依赖xinetd来管理
   # rpm -qf `which rsync`   //检查服务是否正常安装
   /修改配置文件
   # cp /etc/rsyncd.conf /etc/rsyncd.conf.bak
   # > /etc/rsyncd.conf
   # vim /etc/rsyncd.conf       //配置文件内容如下
           uid = rsync
           gid = rsync
           address =172.16.1.15
           port =873
           hosts allow =172.16.1.0/24
           use chroot = no
           max connections = 50
           pid file =/var/run/rsyncd.pid
           lock file =/var/run/rsync.lock
           log file =/var/log/rsyncd.log
           motd file =/etc/rsyncd.motd

           [backup]
           path =/backup
           comment = backup
           read only = false
           list = yes
           auth users = rsyncuser
           secrets file =/etc/rsyncd.passwd

# echo "Welcome to Backup Server" >/etc/rsyncd.motd   //写入一个提示文件
# echo "rsyncuser:password" > /etc/rsyncd.passwd       //添加用户和密码
# chmod 600 /etc/rsyncd.passwd       //给于最小权限
# useradd rsync -s /sbin/nologin –M       //创建备份用户
# rsync --daemon --config=/etc/rsyncd.conf       //Rsync以daemon形式运行
# netstat -anptu | grep 873           //查看端口是否存在
   tcp 0 0 172.16.1.15:873     0.0.0.0:*           LISTEN      7115/rsync
# mkdir /backup           //存放共享文件目录
# chown rsync.rsync /backup/
三、搭建Rsync备份客户端（其他客户端做类似都操作）
   # rpm -qa rsync    //查看服务是否存在
   # yum install -y rsync    //安装服务
   # yum install -y xinetd   //rsync依赖xinetd来管理
   # rpm -qf `which rsync`   //检查服务是否正常安装
   # echo "password" > /etc/rsyncd.passwd       //创建密码文件
   # chmod 600 /etc/rsyncd.passwd
   # mkdir /backup               //创建要备份都目录，所有备份文件都放在这个目录下
   //rsync命令测试成功
   # rsync -avz /backup/ rsyncuser@172.16.1.15::backup --password-file=/etc/rsyncd.passwd

安装seRsync
# wget https://storage.googleapis.com/google-code-archive-downloads/v2/code.google.com/sersync/sersync2.5.4_64bit_binary_stable_final.tar.gz
# tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz
# mkdir /usr/local/sersync
# mkdir /usr/local/sersync/conf
# mkdir /usr/local/sersync/logs
# mkdir /usr/local/sersync/bin
# mv GNU-Linux-x86/sersync2 /usr/local/sersync/bin/
# mv GNU-Linux-x86/confxml.xml /usr/local/sersync/conf/
# vim conf/confxml.xml
# /usr/local/sersync/bin/sersync2 -d -r -o /usr/local/sersync/conf/confxml.xml


   配置文件
<?xml version="1.0" encoding="ISO-8859-1"?>
<head version="2.5">
    <host hostip="10.0.0.121" port="8008"></host>       //本地IP地址
    <debug start="false"/>
    <fileSystem xfs="false"/>
    <filter start="false">
        <exclude expression="(.*)\.svn"></exclude>
        <exclude expression="(.*)\.gz"></exclude>
        <exclude expression="^info/*"></exclude>
        <exclude expression="^static/*"></exclude>
    </filter>
    <inotify>
        <delete start="true"/>
        <createFolder start="true"/>
        <createFile start="false"/>
        <closeWrite start="true"/>
        <moveFrom start="true"/>
        <moveTo start="true"/>
        <attrib start="false"/>
        <modify start="false"/>
    </inotify>

<sersync>
        <localpath watch="/data/">
            <remote ip="10.0.0.120" name="backup"/>           ///服务端IP地址，模板名称
            
            
        </localpath>
        <rsync>
            <commonParams params="-avrtuz"/>       //Rsync传输方式
            <auth start="true" users="rsyncuser" passwordfile="/etc/rsyncd.passwd"/>       ///Rsync 用户名密码
            <userDefinedPort start="true" port="873"/>                   ///端口
            <timeout start="false" time="100"/>
            <ssh start="false"/>
        </rsync>
        <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/>
        <crontab start="false" schedule="600">
            <crontabfilter start="false">
                <exclude expression="*.php"></exclude>
                <exclude expression="info/*"></exclude>
            </crontabfilter>
        </crontab>
        <plugin start="false" name="command"/>
    </sersync>

具体的参考网址为：

http://blog.51cto.com/7834466/2061125

https://www.iyunv.com/thread-300700-1-1.html

http://blog.51cto.com/nolinux/1433623

转载于:https://www.cnblogs.com/happy1983/p/9163198.html

CentOS7+rsync+sersync实现数据实时同步相关推荐

Linux下Rsync+sersync实现数据实时同步
一.为什么要用Rsync+sersync架构? 1.sersync是基于Inotify开发的,类似于Inotify-tools的工具 2.sersync可以记录下被监听目录中发生变化的(包括增加.删除 ...
linux云计算架构师：Rsync+sersync实现数据实时同步
全套学习资料移步至公众号[学神来啦]更多学习资料添加扣扣资源群:661308959 本节所讲内容: 2.1 Rsync概述 2.2 Rsync服务安装 2.3 Rsync+sersy ...
Linux下Rsync+Inotify-tools实现数据实时同步
说明: 操作系统:CentOS 5.X 源服务器:192.168.21.129 目标服务器:192.168.21.127,192.168.21.128 目的:把源服务器上/home/www.osyun ...
Centos rsync + notify 实现数据实时同步
目录 rsync + notify 实现数据实时同步一.简介二.原理三.实验环境四.实验预期五.准备工作六.服务配置目标服务器配置源服务器配置七.实现inodify实时触发rsync ...
Rsync + Sersync 实现数据增量同步
部分引用自:https://blog.csdn.net/tmchongye/article/details/68956808 一.什么是Rsync? Rsync(Remote Synchronize) ...
Rsync+Inotify-tools实现数据实时同步
inotify是一种强大的,细粒度的,异步文件系统时间监控机制,它可以替代crond实现与rsync的触发式文件同步,从而监控文件系统中添加,删除,修改,移动等细粒事件,从LINUX 2.6.13起, ...
rsync+inotify 实现数据实时同步
Rsync (Rmote sync)是一款非常好的数据同步工具,能够通过对比同步双方的数据变动,实现增量同步,还可以通过LAN/WAN实现远程多台主机间文件的同步,还能结合crond任务计划来执行自动 ...
Centos7.x Rsync+Inotify实现数据实时同步
一.概述 rsync是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件.它使用所谓的"Rsync演算法"来使本地和远程两个主机之间的文件达到同步,这个算法只传送两 ...
rsync+sersync实现数据文件实时同步
rsync+sersync实现数据文件实时同步使用rsync+sersync,实现nfs与backup服务器间实时数据同步一.数据同步工具介绍 rsync是一款开源的.快速的.多功能的.可实现全量 ...
sersync + rsync 实现文件的实时同步
这里有一点要特别注意了,就是在你完成备份之后,先不要把本地的文件都给删除了,先把服务停了之后再删除文件, 因为你已删除,检查到两边不一致,他又会把备份端给删除了.所以特别得注意了.这里吃过一次亏. 还 ...

CentOS7+rsync+sersync实现数据实时同步

CentOS7+rsync+sersync实现数据实时同步相关推荐

最新文章

热门文章