注册 登录
  • 欢迎访问"运维那点事",推荐使用Google浏览器访问,可以扫码关注本站的"微信公众号"。
  • 如果您觉得本站对你有帮助,那么可以扫码捐助以帮助本站更好地发展。

Linux命令:rsync数据同步

Linux 彭东稳 8109次浏览 已收录 0个评论

一、rsync命令介绍

rsync命令是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件。rsync使用所谓的“rsync算法”来使本地和远程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快。 rsync是一个功能非常强大的工具,其命令也有很多功能特色选项,我们下面就对它的选项一一进行分析说明。

rsync有以下几个优点:

1)可以镜像保存整个目录树和文件系统。

2)可以很容易做到保持原来文件的权限、时间、软硬连接等。

3)无需特殊权限即可安装。

4)拥有优化的流程和比较高的文件传输效率。

5)可以使用shell(rsh、ssh)方式来传输文件。

6)支持匿名运行。

7)与scp相比,rsync传输速度绝对远远超过scp的传输速度。

我们在局域网中经常用rsync和scp传输大量mysql数据库文件,发现rsync传输文件速度至少要比scp快20倍以上。所以如果需要在Liunx/Unix服务器之间互传海量数据时,建议选择rsync进行传输。

二、rsync的认证方式

rsync有两种常用的认证方式,一种是rsync-daemon方式,另外一种是ssh方式。

第一种: ssh

rsync在ssh认证方式下,可通过系统用户进行认证,即在rsync上通过ssh隧道进行传输,类似于scp工具。此时同步操作不在局限于rsync中定义的同步文件夹。

注意:ssh认证方式,不需要服务器和客户端配置rsync配置文件,只需要双方都安装rsync服务,并且也不需要双方启动rsync。

接下来就可以在客户端使用rsync命令来上传本地httpd软件包到112.74.99.130的root目录下,SSH方式是通过系统用户来进行操作的,如下:

第二种: rsync-daemon

rsync在rsync-daemon认证方式下,默认监听TCP的873端口。rsync-daemon认证方式是rsync的主要认证方式,这个也是我们经常使用的认证方式。并且也只有在此种模式下,rsync才可以把密码写入到一个文件中。

注意:rsync-daemon认证方式,需要服务器和客户端都安装rsync服务,并且只需要rsync服务器端启动rsync,同时配置rsync配置文件。客户端启动不启动rsync服务,都不影响同步的正常进行。另外,rsync软件无论是服务器端还是客户端都是同一个软件包。

三、rsync-daemon模式运行

1. rsync安装

通过上面可以很明显的看到rsync确实被安装到了/usr/bin目录下。并且rsync在安装时生成的/etc/xinetd.d/rsync文件。在CentOS 6下rsync默认以xinetd方式运行rsync服务(顺时守护进程),所以RPM方式安装的话rsync,我们只需启动xinet服务即可。但是在启动xinetd服务之前,我们还需要配置文件/etc/xinetd.d/rsync,设置disable=no,如下:

配置完毕后,我们还需要安装xinetd软件包,否则无法启动xinetd服务。如下:

2. rsync命令参数使用

  • 语法

对应于以上六种命令格式,rsync有六种不同的工作模式:

1)拷贝本地文件。当SRC和DES路径信息都不包含有单个冒号”:”分隔符时就启动这种工作模式。如:

2)使用一个远程shell程序(如rsh、ssh)来实现将本地机器的内容拷贝到远程机器。当DST路径地址包含单个冒号”:”分隔符时启动该模式。如:

3)使用一个远程shell程序(如rsh、ssh)来实现将远程机器的内容拷贝到本地机器。当SRC地址路径包含单个冒号”:”分隔符时启动该模式。如:

4)从远程rsync服务器中拷贝文件到本地机。当SRC路径信息包含”::”分隔符时启动该模式。如:

5)从本地机器拷贝文件到远程rsync服务器中,当DST路径信息包含”::”分隔符时启动该模式。如:

6)列出远程机的文件列表,这类似于rsync传输,不过只要在命令中省略掉本地机信息即可。如:

其中第四种和第五种模式没有多大的区别,在这几种模式中第三种和第六种模式是我们经常使用的,特别是第三种模式。

  • 选项

四、rsync服务器端配置文件

rsync服务器端需要两个配置文件:rsyncd.conf、rsyncd.password。

其中rsyncd.conf默认存放在/etc/目录下(需要自己创建),同时它也是rsync服务器的主配置文件。该文件配置了rsync服务器的控制认证、访问、日志记录等等。而rsyncd.password主要用于存储rsync用户名和密码。

但是在rsync安装完毕后后是不会生成以上这两个配置文件的,需要我们手工进行创建。对于主配置文件为“/etc/rsyncd.conf”,创建该文件并插入如下内容:

创建密码文件,采用这种方式不能使用系统用户对客户端进行认证,所以需要创建一个密码文件,其格式为“username:password”,用户名可以和密码可以随便定义,最好不要和系统帐户一致,同时要把创建的密码文件权限设置为600,这在前面的模块参数做了详细介绍。

完成以上工作,现在客户端就可以把数据上传到服务器端进行备份了,如下:

服务器端(112.74.99.130)

客户端(172.16.17.240)

注意:这里的::data就是/etc/rsyncd.conf配置文件中[data]标签,另外如果path路径下/data有多个路径,只需要在::data/path指定即可。

恢复数据,当客户端的数据出现问题时,那么这时就需要通过服务端的数据对客户端进行恢复,但前提是客户端允许服务端有写入权限,否则也不能在服务端直接对客户端进行恢复,使用rsync对数据进行恢复的方法如下:

如果你是做定时同步或备份任务的话,一直在交互式模式手动输入密码也不太现实。所以,可以使用 --password-file参数指定一个文件,文件中写入密码就可以了,这个文件的权限也必须是600。

rsync配置文件的具体参数可以看官网:https://rsync.samba.org/ftp/rsync/rsyncd.conf.html


如果您觉得本站对你有帮助,那么可以支付宝扫码捐助以帮助本站更好地发展,在此谢过。
喜欢 (2)or分享 (0)
关于作者:

您必须 登录 才能发表评论!