大家好,又见面了,我是你们的朋友全栈君。
对于需要远程同步文件来说,我们常见的方式有 scp 或者 rsync,但是想定时任务去同步的话,往往都需要设置免密登录,为安全起见,线上服务器没必要设置这个,且添加新的机器又要去设置免密,着实比较麻烦。采用rsync 客户服务端的话,只需要设置一个密码即可。 这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快。 rsync是一个功能非常强大的工具,其命令也有很多功能特色选项,我们下面就对它的选项一一进行分析说明。
一、rsync常见参数
代码语言:javascript复制-q, --quiet 精简输出模式。
-c, --checksum 打开校验开关,强制对文件传输进行校验。
-a, --archive 归档模式,表示以递归方式传输文件,并保持所有文件属性,等于-rlptgoD。
-r, --recursive 对子目录以递归模式处理。
-R, --relative 使用相对路径信息。
-b, --backup 创建备份,也就是对于目的已经存在有同样的文件名时,将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
--backup-dir 将备份文件(如~filename)存放在在目录下。
-suffix=SUFFIX 定义备份文件前缀。
-u, --update 仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件,不覆盖更新的文件。
-l, --links 保留软链结。
-L, --copy-links 想对待常规文件一样处理软链结。
--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结。
--safe-links 忽略指向SRC路径目录树以外的链结。
-H, --hard-links 保留硬链结。
-p, --perms 保持文件权限。
-o, --owner 保持文件属主信息。
-g, --group 保持文件属组信息。
-D, --devices 保持设备文件信息。
-t, --times 保持文件时间信息。
-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间。
-n, --dry-run现实哪些文件将被传输。
-w, --whole-file 拷贝文件,不进行增量检测。
-x, --one-file-system 不要跨越文件系统边界。
-B, --block-size=SIZE 检验算法使用的块尺寸,默认是700字节。
-e, --rsh=command 指定使用rsh、ssh方式进行数据同步。
--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息。
-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件,用来排除那些不希望传输的文件。
--existing 仅仅更新那些已经存在于DST的文件,而不备份那些新创建的文件。
--delete 删除那些DST中SRC没有的文件。
--delete-excluded 同样删除接收端那些被该选项指定排除的文件。
--delete-after 传输结束以后再删除。
--ignore-errors 及时出现IO错误也进行删除。
--max-delete=NUM 最多删除NUM个文件。
--partial 保留那些因故没有完全传输的文件,以是加快随后的再次传输。
--force 强制删除目录,即使不为空。
--numeric-ids 不将数字的用户和组id匹配为用户名和组名。
--timeout=time ip超时时间,单位为秒。
-I, --ignore-times 不跳过那些有同样的时间和长度的文件。
--size-only 当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间。
--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口,默认为0。
-T --temp-dir=DIR 在DIR中创建临时文件。
--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份。
-P 等同于 --partial。
--progress 显示备份过程。
-z, --compress 对备份的文件在传输时进行压缩处理。
--exclude=PATTERN 指定排除不需要传输的文件模式。
--include=PATTERN 指定不排除而需要传输的文件模式。
--exclude-from=FILE 排除FILE中指定模式的文件。
--include-from=FILE 不排除FILE指定模式匹配的文件。
--version 打印版本信息。
--address 绑定到特定的地址。
--config=FILE 指定其他的配置文件,不使用默认的rsyncd.conf文件。
--port=PORT 指定其他的rsync服务端口。
--blocking-io 对远程shell使用阻塞IO。
-stats 给出某些文件的传输状态。
--progress 在传输时现实传输过程。
--log-format=formAT 指定日志文件格式。
--password-file=FILE 从FILE中得到密码。
--bwlimit=KBPS 限制I/O带宽,KBytes per second。
-h, --help 显示帮助信息。
二、 rsync 服务端配置
- 安装rsync软件
# yum install rsync
- 创建rsyncd.conf配置文件
# 本配置注释不要写进配置文件,注释内容会成为参数内容,会导致服务异常
# vim /etc/rsyncd.conf
uid = root # 设置rsync运行权限为root
gid = root # 设置rsync运行权限为root
log file = /var/log/rsyncd.log # 日志文件位置,启动rsync后自动产生这个文件,无需提前创建
pidfile = /var/run/rsyncd.pid # pid文件的存放位置
lock file = /var/run/rsync.lock # 支持max connections参数的锁文件
secrets file = /etc/rsync.secret # 用户认证配置文件,里面保存用户名称和密码,后面会创建这个文件
motd file = /etc/rsyncd.Motd # rsync启动时欢迎信息页面文件位置(文件内容自定义)
[mysql] # 自定义名称,也就是模块的名称
path = /data/bak/mysql/ # rsync服务端数据目录路径
comment = mysql data
port=873 # 默认端口,可设置也可不设置,设置了就需要制定端口了
use chroot = no # 默认为true,修改为no,增加对目录文件软连接的备份
read only = no # 设置rsync服务端文件读写权限
list = no # 不显示rsync服务端资源列表
max connections = 200
timeout = 600
auth users = backup # 执行数据同步的用户名,可以设置多个,用英文状态下逗号隔开
hosts allow = 192.168.21.129 # 允许进行数据同步的客户端IP地址,可以设置多个,用英文状态下逗号隔开
hosts deny = 192.168.21.254,10.0.0.0/8 # 禁止数据同步的客户端IP地址,可以设置多个,用英文状态下逗号隔开
# 本配置注释不要写进配置文件,注释内容会成为参数内容,会导致服务异常
- 创建用户认证文件
# vim /etc/rsync.secret # 配置文件,添加以下内容
backup:123456 # 格式,用户名:密码,可以设置多个,每行一个用户名:密码
- 设置文件权限
# chmod 600 /etc/rsync.secret
- 启动服务端
# /usr/bin/rsync --daemon #启动
三、 rsync 客户端配置
- 客户端安装rsync软件
# yum install rsync -y
- 客户端秘钥文件
# vim /etc/rsync.secret
123456
- 设置权限问题
# 一定要设置为600
# chmod 600 /etc/rsync.secrets
- 客户端同步服务端数据文件
# 相当于把 10.2.2.128 rsync中 mysql 模块中 /data/bak/mysql/ 目录文件同步到 当前 /data/ 目录下
# rsync -avzP --password-file=/etc/rsync.secret backup@10.2.2.128::mysql /data/
- 客户端上传文件到服务端
# 相当于把客户端 /data/ 目录下的文件上传到 远程 mysql 模块中 /data/bak/mysql/下的 back 目录下
# rsync -avzP --password-file=/etc/rsync.secret /data/ backup@10.2.2.128::mysql/back/
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
发布者:全栈程序员栈长,转载请注明出处:https://javaforall.cn/182572.html原文链接:https://javaforall.cn