rsync 远程同步

   日期:2020-10-30     浏览:88    评论:0    
核心提示:文章目录一、概念二、配置rsync 源服务器2.1 、rsync 同步源2.2 、配置rsync源2.3、命令用法2.4、配置源表示方法三、实验3.1、实验环境3.2、实验过程3.2.1、修改配置文件3.2.2、创建于用户密码文件3.2.3、启动rsync 服务3.2.4、发起端配置3.2.5、设置周期性计划任务3.2.6、rsync + inotify3.2.7、通过inotifywai t触发rsync 同步操作一、概念rsync,全称为:Remote Sync(远程同步),是一款开源的快速增量备份

文章目录

  • 一、概念
  • 二、配置rsync 源服务器
    • 2.1 、rsync 同步源
    • 2.2 、配置rsync源
    • 2.3、命令用法
    • 2.4、配置源表示方法
  • 三、实验
    • 3.1、实验环境
    • 3.2、实验过程
      • 3.2.1、修改配置文件
      • 3.2.2、创建于用户密码文件
      • 3.2.3、启动rsync 服务
      • 3.2.4、发起端配置
      • 3.2.5、设置周期性计划任务
      • 3.2.6、rsync + inotify
      • 3.2.7、通过inotifywai t触发rsync 同步操作

一、概念

rsync,全称为:Remote Sync(远程同步),是一款开源的快速增量备份工具,可以在不同主机之间镜像同步整个目录树

支持本地复制,增量备份、保持连接和权限,或者与其他SSH,rsync主机同步

采用优化的同步算法,传输前执行压缩,因此非常适用于异地备份、镜像服务器等应用

二、配置rsync 源服务器

2.1 、rsync 同步源

指备份操作的远程服务器,也称为备份源

2.2 、配置rsync源

基本思路
建立rsyncd.conf配置文件、独立的账号文件
启用rsync——daemon模式

应用示例
用户gsybk,允许下行同步
操作的目录为/var/www/html

配置文件
需要手动建立,语法类似samba配置
认证配置auth users、secrets file ,不加则默认为匿名

rsync账号文件
采用“用户名:密码”的格式记录,每行一个用户记录
独立的账号数据,不依赖系统账号

启动rsync服务
通过–daemon独自提供服务
执行 kill $(cat /var/run/rsyncd.pid)关闭rsync服务

2.3、命令用法

rsync [选项] 原始位置 目标位置

●-a:归档模式,递归并保留对象属性,等同于 -rlptgoD
●-v:显示同步过程的详细(verbose)信息
●-z:在传输文件时进行压缩(compress)
●-H:保留硬连接文件
●-A:保留ACL属性信息
●–delete:删除目标位置有而原始位置没有的文件
●–checksum:根据对象的校验和来决定是否跳过文件

2.4、配置源表示方法

格式1:用户名@主机地址::共享模块名
格式2:rsync://用户名@主机地址/共享模块名

三、实验

3.1、实验环境

VMware软件 两台centos7.6版本虚拟机
一台源端 ip地址为20.0.0.21 需要安装服务 rsync,httpd
一台发起端 ip地址为20.0.0.22 需要安装服务 rsync,inotify-tools
均为防火墙,内核防护关闭

3.2、实验过程

3.2.1、修改配置文件

vim /etc/rsyncd.conf
uid = nobody
gid = nobody
use chroot = yes
address = 20.0.0.21
port 873
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
hosts allow = 20.0.0.0/24
[wwwroot]
path = /var/www/html
comment = Document Root of www.51xit.com
read only = yes
dont compress = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2
auth users = backuper
secrets file = /etc/rsyncd_users.db

3.2.2、创建于用户密码文件

vi /etc/rsyncd_users.db
backuper:abc123

chmod 600 /etc/rsyncd_users.db

3.2.3、启动rsync 服务

rsync --daemon
netstat -anpt |grep rsync
tcp 0 0 20.0.0.21:873 0.0.0.0:* LISTEN 20917/rsync

在 /var/www/html目录中,新建文件

echo “this is 110” > /var/www/html/1.txt

3.2.4、发起端配置

测试有密码拉取文件

方法1:
rsync -avz backuper@20.0.0.21::wwwroot /opt

方法2:
rsync -avz rsync://backuper@20.0.0.21/wwwroot /opt

查看拉取的文件

cat /opt/1.txt
this is 110

rsync源的免密交互处理
在源端上:


cd /opt
rm -rf 1.txt

vi /etc/server.pass
abc123

chmod 600 /etc/server.pass
rsync -az --delete --password-file=/etc/server.pass backuper@20.0.0.21::wwwroot /opt/

3.2.5、设置周期性计划任务

mkdir /webbak
crontab -e
30 22 * * * /usr/bin/rsync -avz --delete --password-file=/etc/server.pass backuper@20.0.0.10::wwwroot /webbak

systemctl restart crond
systemctl enable crond

3.2.6、rsync + inotify

修改inotify内核参数
源端上:

vi /etc/sysctl.conf
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576

sysctl -p
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576

安装http服务

yum -y install httpd
systemctl start httpd
systemctl enable httpd

安装inotify-tools辅助工具

yum -y install gcc gcc-c++

上传inotify-tools压缩包到/opt目录下
cd /opt
tar zxvf inotify-tools-3.14.tar.gz
cd inotify-tools-3.14/
./configure
make && make install
cd ~
mkdir /web
inotifywait -mrq -e modify,create,move,delete /web

新开启一个发起端(1)的终端

cd /web
touch 1.txt

返回在发起端查看

/web CREATE 1.txt 会看到有此信息更新

3.2.7、通过inotifywai t触发rsync 同步操作

cd /opt
vi inotify.sh
#!/bin/bash
INOTIFY_CMD=“inotifywait -mrq -e create,delete,move,modify,attrib /web”
RSYNC_CMD=“rsync -azH --delete --password-file=/etc/server.pass /web backuper@20.0.0.21::wwwroot”
$INOTIFY_CMD | while read DIRECTORY EVENT FILE
do
if [ $(pgrep rsync | wc -l) -le 0 ] ; then
$RSYNC_CMD
fi
done

chmod +x inotify.sh

在接收端上:

vi /etc/rsyncd.conf
read only = no
//设置只读模式
netstat -anpt | grep rsync
tcp 0 0 20.0.0.21:873 0.0.0.0:* LISTEN 20917/rsync

kill -9 20917
netstat -anpt | grep rsync
//已经关闭服务

rsync --daemon
//重启服务,报错
failed to create pid file /var/run/rsyncd.pid: File exists

cd /run/
rm -rf rsyncd.pid
rsync --daemon
//启动成功
netstat -anpt | grep rsync
tcp 0 0 20.0.0.21:873 0.0.0.0:* LISTEN 26021/rsync

注意:发起端的/web和接收端的/var/www/html权限设置为777
接收端:chmod 777 /var/www/html/
发起端:chmod 777 /web

在发起端上:

./inotify.sh

新开启终端发起端(1):
cd /web
echo “this is t” >text.txt
ll
-rw-r–r-- 1 root root 13 Oct 23 03:12 text.txt

在接收端上查看:

cd /var/www/html/web
ll
-rw-r–r-- 1 root root 13 Oct 23 15:08 text.txt

在发起端(1)上查看:

rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1178) [sender=3.1.2]
rsync: chgrp “/web” (in wwwroot) failed: Operation not permitted (1)
rsync: chgrp “/web/.text.txt.veXjy3” (in wwwroot) failed: Operation not permitted (1)
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1178) [sender=3.1.2]

测试,发现可以将发起端创建的数据文件同步到接收端,但是发起端会有报错

解决方法:将接收的uid和gid修改为root

vi /etc/rsyncd.conf
uid = root
gid = root
cd /run
rm -rf rsyncd.pid
rsync --daemon
netstat -anpt | grep rsync
tcp 0 0 20.0.0.21:873 0.0.0.0:* LISTEN 20987/rsync

返回发起端:

重新运行脚本
./inotify.sh &
//可以放到后台运行

重新打开发起端(1):

cd /web
touch aa

到接收端:

cd /var/www/html/web
ll
aa
 
打赏
 本文转载自:网络 
所有权利归属于原作者,如文章来源标示错误或侵犯了您的权利请联系微信13520258486
更多>最近资讯中心
更多>最新资讯中心
0相关评论

推荐图文
推荐资讯中心
点击排行
最新信息
新手指南
采购商服务
供应商服务
交易安全
关注我们
手机网站:
新浪微博:
微信关注:

13520258486

周一至周五 9:00-18:00
(其他时间联系在线客服)

24小时在线客服