当前位置：首页 > news >正文

rsync同步工具实战

news 来源：原创 2024/5/19 2:08:41

rsync同步工具实战

rsync具有增量同步的功能，相对于cp工具来说，效率比较高；同时可以在本地到本地或本地到远程之间，实现镜像备份

环境：分别有机器：server-178/24，client-b-179/24，client-c-180/24

其中以server-178/24为rsync服务端，client-b-179/24，client-c-180/24为rsync客户端

实战过程：

检查服务端和客户端环境：rpm -aq|grep rsync

[root@server ~]# rpm -aq|grep rsync

rsync-2.6.8-3.1

在client-b-179/24的/tmp目录下创建179dir目录在179dir目录下创建一个文件179.txt

[root@client-B ~]# cd /tmp

[root@client-B tmp]# mkdir 179dir

[root@client-B tmp]# touch 179dir/179.txt

[root@client-B tmp]# tree 179dir

179dir

`-- 179.txt

0 directories, 1 file

在client-c-180/24的/tmp目录下创建180dir目录在180dir目录下创建一个文件180txt

[root@client-C ~]# cd /tmp

[root@client-C tmp]# mkdir 180dir

[root@client-C tmp]# touch 180dir/180.txt

[root@client-C tmp]# tree 180dir

180dir/

`-- 180.txt

0 directories, 1 file

在服务器新建一个普通用户crazy密码123456，在客户端上使用rsync命令利用ssh隧道，ssh指定端口5201，把客户端client-b-179/24的/tmp/179dir，client-c-180/24的/tmp/180dir，推送到服务端的/tmp目录下

服务器创建一个用户：

[root@server ~]# mkdir crazy

[root@server ~]# passwd crazy

Changing password for user crazy.

New UNIX password:

BAD PASSWORD: it is too simplistic/systematic

Retype new UNIX password:

passwd: all authentication tokens updated successfully.

把本地的增量推送到远端，在client-b-179/24执行命令：

rsync -avz -P /tmp/179dir -e 'ssh -p 5201' crazy@192.168.1.178:/tmp

把本地的增量推送到远端，在client-c-180/24执行命令：

rsync -avz -P /tmp/180dir -e 'ssh -p 5201' crazy@192.168.1.178:/tmp

以client-b-179/24为例子，如下：

[root@client-B tmp]# rsync -avz -P /tmp/179dir -e 'ssh -p 5201' crazy@192.168.1.178:/tmp

The authenticity of host '192.168.1.178 (192.168.1.178)' can't be established.

RSA key fingerprint is 1d:8e:6d:4e:63:41:8f:19:c0:dd:7e:1d:c4:dd:9c:8d.

Are you sure you want to continue connecting (yes/no)? yes

Warning: Permanently added '192.168.1.178' (RSA) to the list of known hosts.

crazy@192.168.1.178's password:

building file list ...

2 files to consider

179dir/

179dir/179.txt

0 100% 0.00kB/s 0:00:00 (xfer#1, to-check=0/2)

sent 113 bytes received 48 bytes 24.77 bytes/sec

total size is 0 speedup is 0.00

查看服务端的情况：

[root@server ~]# tree /tmp/

/tmp/

`-- serverdirB

`-- aa

1 directory, 1 file

[root@server ~]# tree /tmp/

/tmp/

|-- 179dir

| `-- 179.txt

|-- 180dir

| `-- 180.txt

`-- serverdirB

`-- aa

3 directories, 3 files

完全同步操作：

-----------------------------推送-----------------------------

把本地同步到远端，远端需要和本地的保持相同，在client-b-179/24执行命令：

rm -f 179dir/179.txt

rsync -avz -P --delete /tmp/179dir -e 'ssh -p 5201' crazy@192.168.1.178:/tmp

把本地同步到远端，远端需要和本地的保持相同，在client-c-180/24执行命令：

rm -f 180dir/180.txt

rsync -avz -P --delete /tmp/180dir -e 'ssh -p 5201' crazy@192.168.1.178:/tmp

以client-b-179/24为例子，如下：

[root@client-B tmp]# rm -f 179dir/179.txt #在本地先把179.txt文件删除

[root@client-B tmp]#rsync -avz -P --delete /tmp/179dir -e 'ssh -p 5201' crazy@192.168.1.178:/tmp

crazy@192.168.1.178's password:

building file list ...

1 file to consider

deleting 179dir/179.txt #把远端的179.txt文件删除

179dir/

sent 59 bytes received 26 bytes 24.29 bytes/sec

total size is 0 speedup is 0.00

查看服务端的情况：

[root@server ~]# tree /tmp/

/tmp/

|-- 179dir

| `-- 179.txt

|-- 180dir

| `-- 180.txt

`-- serverdirB

`-- aa

3 directories, 3 files

[root@server ~]# tree /tmp/

/tmp/

|-- 179dir #客户端的179.txt文件删除了，使用--delete选项进行同步后，服务端这里跟着被删除了

|-- 180dir

`-- serverdirB

`-- aa

3 directories, 1 file

-----------------------------抓取-----------------------------

把远端同步到本地，本地的需要和远端的保持相同，在client-b-179/24执行命令：

rsync -avz -P --delete -e 'ssh -p 5201' crazy@192.168.1.178:/tmp/179dir /tmp/

把远端同步到本地，本地的需要和远端的保持相同，在client-c-180/24执行命令：

rsync -avz -P --delete -e 'ssh -p 5201' crazy@192.168.1.178:/tmp/180dir /tmp/

查看服务端的情况：

[root@server ~]# tree /tmp/

/tmp/

|-- 179dir

| `-- 179.log #服务器有179.log文件

|-- 180dir

| `-- 180.log #服务器有180.log文件

`-- serverdirB

`-- aa

3 directories, 3 files

以client-b-179/24为例子，如下：

[root@client-B tmp]# tree 179dir/

179dir/

`-- 179.log

0 directories, 1 file

[root@client-B tmp]# rm -f 179dir/179.log #把本地的179.log文件删除

[root@client-B tmp]# tree 179dir/

179dir/

0 directories, 0 files

[root@client-B tmp]# rsync -avz -P --delete -e 'ssh -p 5201' crazy@192.168.1.178:/tmp/179dir /tmp/

crazy@192.168.1.178's password:

receiving file list ...

2 files to consider

179dir/

179dir/179.log

0 100% 0.00kB/s 0:00:00 (xfer#1, to-check=0/2)

sent 48 bytes received 145 bytes 4.15 bytes/sec

total size is 0 speedup is 0.00

[root@client-B tmp]# tree 179dir/

179dir/

`-- 179.log #在服务端把179.log文件抓取回来

0 directories, 1 file

在服务端配置rsync的守护进程，进行本地和远端的同步

服务端进行以下的配置：

rsync默认的配置文件：/etc/rsyncd.conf #如果不存在，则手工建立

[root@server ~]# vi /etc/rsyncd.conf

添加一下内容：

#rsync_config-------------------start

#crated by crazy 20151030

#rsyncd.conf start##

uid = root #远程主机登陆进来存在的身份，这个身份可以使用普通的用户，这样比较安全

gid = root #远程主机登陆身份属于某个组成员，一般改成普通组也可以，这样比较安全

use chroot = no

max connetctions = 200

timeout = 300

pid file = /var/run/rsyncd.pid

lock file = /var/run/rsync.lock

log file = /var/log/rsyhcd.log

igonre errors

read only = false

list = false

hosts allow = 192.168.1.0/24 #测试改成172.16.1.0/24，发现客户端还能进行访问，这个问题还没找到答案

hosts deny = 0.0.0.0/32

auth users = rsync_backup #虚拟的用户名称可以改，一般起简单有含义的名称

secrets file = /etc/rsync.password #密码文件的路径和名字可以更改，在使用的时候能调用就可以

[tmp] #在使用过程中，调用的模块名称，也就是下面一行的路径

path = /tmp/ #这个是调用模块后，对端推送或抓取文件路径

#rsync_config-------------------end

[root@server ~]# rsync --daemon

[root@server ~]# ps -ef|grep rsync

root 4314 1 0 08:07 ? 00:00:00 rsync --daemon

root 4317 3654 0 08:08 pts/1 00:00:00 grep rsync

[root@server ~]# echo "rsync_backup:123456" >/etc/rsync.password

#上面一行：这个密码文件路径和配置文件必须相同，还有里面的账号名称也需要和配置文件相同，不然无法成功

[root@server ~]# cat /etc/rsync.password

rsync_backup:123456

[root@server tmp]# pkill rsync #杀死进程

[root@server tmp]# rsync --daemon #启动守护进程

[root@server tmp]# ps -ef|grep rsync|grep -v grep

root 2844 1 0 19:13 ? 00:00:00 rsync --daemon

设置开机自启动：

[root@server tmp]# echo "#rsync daemon by crazy 20151031" >>/etc/rc.local

[root@server tmp]# echo "/usr/bin/rsync --daemon" >>/etc/rc.local

[root@server tmp]# tail -2 /etc/rc.local

#rsync daemon by crazy 20151031

/usr/bin/rsync --daemon

客户端进行以下的配置：

在client-b-179/24执行命令

[root@client-B tmp]# echo "123456" >/etc/rsync.password

[root@client-B tmp]# cat /etc/rsync.password

123456

[root@client-B tmp]# chmod 600 /etc/rsync.password #密码文件改成600这样比较安全

[root@client-B tmp]# chown root /etc/rsync.password

#上面一行：属主改成和配置文件相同的用户，如果是普通用户则改成普通的用户

在client-c-180/24执行命令

[root@client-C tmp]# echo "123456" >/etc/rsync.password

[root@client-C tmp]# cat /etc/rsync.password

123456

[root@client-C tmp]# chmod 600 /etc/rsync.password #密码文件改成600这样比较安全

[root@client-C tmp]# chown root /etc/rsync.password

#上面一行：属主改成和配置文件相同的用户，如果是普通用户则改成普通的用户

在client-b-179/24执行推送命令：

rsync -vza -P /tmp/179dir rsync_backup@192.168.1.178::tmp/ --password-file=/etc/rsync.password

[root@client-B ~]#rsync -vza -P /tmp/179dir rsync_backup@192.168.1.178::tmp/ --password-file=/etc/rsync.password

building file list ...

3 files to consider

179dir/

179dir/179.log

0 100% 0.00kB/s 0:00:00 (xfer#1, to-check=1/3)

179dir/.ICE-unix/

sent 179 bytes received 50 bytes 152.67 bytes/sec

total size is 0 speedup is 0.00

服务端查看：

[root@server tmp]# tree

`-- serverdirB

`-- aa

1 directory, 1 file

[root@server tmp]# tree

|-- 179dir

| `-- 179.log

`-- serverdirB

`-- aa

2 directories, 2 files

在client-c-180/24执行推送命令：

rsync -vza -P /tmp/180dir rsync_backup@192.168.1.178::tmp/ --password-file=/etc/rsync.password

[root@client-C ~]# rsync -vza -P /tmp/180dir rsync_backup@192.168.1.178::tmp/ --password-file=/etc/rsync.password

building file list ...

2 files to consider

180dir/

180dir/180.log

0 100% 0.00kB/s 0:00:00 (xfer#1, to-check=0/2)

sent 137 bytes received 44 bytes 362.00 bytes/sec

total size is 0 speedup is 0.00

服务端查看：

[root@server tmp]# tree

|-- 179dir

| `-- 179.log

`-- serverdirB

`-- aa

2 directories, 2 files

[root@server tmp]# tree

|-- 179dir

| `-- 179.log

|-- 180dir

| `-- 180.log

`-- serverdirB

`-- aa

3 directories, 3 files

模拟错误：

模拟客户端的密码文件权限的错误：

在client-b-179/24执行命令

[root@client-B ~]# ll /etc/rsync.password

-rw------- 1 root root 7 Oct 29 08:05 /etc/rsync.password #rsync.password 文件权限是600

[root@client-B ~]#rsync -vza -P /tmp/179dir rsync_backup@192.168.1.178::tmp/ --password-file=/etc/rsync.password

building file list ...

3 files to consider

sent 128 bytes received 16 bytes 288.00 bytes/sec #成功连接

total size is 0 speedup is 0.00

[root@client-B ~]# chmod 644 /etc/rsync.password

[root@client-B ~]# ll /etc/rsync.password

-rw-r--r-- 1 root root 7 Oct 29 08:05 /etc/rsync.password #rsync.password 文件权限是644

[root@client-B ~]#rsync -vza -P /tmp/179dir rsync_backup@192.168.1.178::tmp/ --password-file=/etc/rsync.password

password file must not be other-accessible #提示密码文件必须不能给其他人访问

continuing without password file #本地密码文件验证失败

Password: #提示输入密码

在服务端执行命令

[root@server tmp]# chmod 644 /etc/rsync.password

[root@server tmp]# ll /etc/rsync.password

-rw-r--r-- 1 root root 20 Oct 29 08:11 /etc/rsync.password

在client-c-180/24执行命令

[root@client-C ~]# ll /etc/rsync.password

-rw------- 1 root root 7 Oct 29 08:05 /etc/rsync.password

[root@client-C ~]# rsync -vza -P /tmp/180dir rsync_backup@192.168.1.178::tmp/ --password-file=/etc/rsync.password

@ERROR: auth failed on module tmp #提示在模块tmp授权验证失败，由于在服务端修改了密码文件的权限导致

rsync error: error starting client-server protocol (code 5) at main.c(1296) [sender=2.6.8]

转载于:https://blog.51cto.com/crazyday/1708395

App 引导界面

ionic导入其它js库

路由表和转发表解释

volatile详解

Weblogic读不到Word文件

DDNS在生产环境中的应用

Java高精度四则运算（无括号限制）

StartUpListener类

linux .o,.a,.so文件解析

联想壁纸下载

shell内置命令test单双括号的区别

mapper.xml配置文件详解

linux shell 启动脚本

java构造函数浅谈

【转】【干货】第三方支付风控系统架构与运作机制阐述！

「前端早读君006」移动开发必备：那些玩转H5的小技巧

C++类的相互关联

CSS盒模型深入

JAVA_NIO系列——Channel和Buffer详解

javascript 总结（常用工具类的封装）

js中forEach回调同异步问题

Mysql优化

pdf文件如何在线转换为jpg图片

Terraform入门 - 3. 变更基础设施

Three.js 再探 - 写一个跳一跳极简版游戏

use Google search engine

Vue.js-Day01

vue2.0项目引入element-ui

Web Storage相关

web标准化（下）

第三十一到第三十三天：我是精明的小卖家（一）

对超线程几个不同角度的解释

记一次删除Git记录中的大文件的过程

通过来模仿稀土掘金个人页面的布局来学习使用CoordinatorLayout

用 vue 组件自定义 v-model，实现一个 Tab 组件。

Semaphore

不要一棍子打翻所有黑盒模型，其实可以让它们发挥作用 ...

MPV，汽车产品里一个特殊品类的进化过程

# include “ “ 和 # include ＜＞两者的区别

#### go map 底层结构 ####

#include

(ZT)薛涌：谈贫说富

（初研） Sentence-embedding fine-tune notebook

（第9篇）大数据的的超级应用——数据挖掘-推荐系统

（二）构建dubbo分布式平台-平台功能导图

(六)库存超卖案例实战——使用mysql分布式锁解决“超卖”问题

(一) storm的集群安装与配置

（原创）Stanford Machine Learning (by Andrew NG) --- (week 9) Anomaly DetectionRecommender Systems...

（转）c++ std::pair 与 std::make

(转)拼包函数及网络封包的异常处理(含代码)

（转）项目管理杂谈-我所期望的新人

（轉）JSON.stringify 语法实例讲解

.L0CK3D来袭：如何保护您的数据免受致命攻击

.net mvc 获取url中controller和action

.NET 设计模式初探

rsync同步工具实战

实战过程：

完全同步操作：

在服务端配置rsync的守护进程，进行本地和远端的同步

模拟错误：

相关文章：