[转帖]rsync参数详解

rsync,参数,详解 · 浏览次数 : 0

小编点评

**RSync工具知识点** **概述** RSync是一个强大的文件同步工具,它创建一个镜像的副本,从而提高传输效率。相比于scp命令,它拥有更好的性能,因为它只传输文件信息,而忽略文件属性。 **相关参数** * `-p`: 保持文件的所有权限。 * `-o`: 保持文件的所有人。 * `-g`: 保持文件的组。 * `-t`: 保持文件的时间戳。 * `-D`: 保持设备文件。 * `-v`: 显示详细模式输出。 * `-q`: 简化输出模式。 * `-c`: 打开校验开关,强制对文件传输进行校验。 * `-a`: 归档模式,表示以递归方式传输文件,并保持所有文件属性。 * `--suffix`: 指定备份文件前缀。 * `-u`: 只进行更新,跳过所有已经存在于DST的文件。 * `-l`: 保留软链结。 * `-L`: 按文件系统边界进行处理。 * `-copy-unsafe-links`: 仅拷贝指向SRC路径目录树以外的链结。 * `-safe-links`: 忽略指向SRC路径目录树以外的链结。 * `-hard-links`: 保留硬链结。 * `-p`: 确保文件权限保持一致。 * `-owner`: 确保文件属主信息保持一致。 * `-group`: 确保文件属组信息保持一致。 * `-devices`: 确保设备文件信息保持一致。 * `-t`: 确保文件时间信息保持一致。 * `-s`: 对稀疏文件进行特殊处理以节省DST的空间。 * `-n`: 只备份那些已经存在于DST的文件,而不备份那些新创建的文件。 * `-partial`: 留存那些因故没有完全传输的文件,以是加快随后的再次传输。 * `-force`: 强制删除目录,即使不为空。 * `-numeric-ids`: 不将数字的用户和组ID匹配为用户名和组名。 * `-timeout`: 设置传输结束后的等待时间。 * `-ignore-times`: 不跳过那些有同样的时间和长度的文件。 * `-size-only`: 当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间。 * `-modify-window`: 决定文件是否使用时间戳窗口,默认是0-T。 * `-temp-dir`: 在DIR中创建临时文件。 * `-compare-dest`: 同样比较DIR中的文件来决定是否需要备份。 * `-p`: 等同于 `-partial`。 * `-progress`: 显示备份过程。 * `-log-format`: 设置日志文件格式。 * `-password-file`: 从FILE中得到密码. * `-bwlimit`: 限制I/O带宽,单位为KBytes per second-h。 * `-help`: 显示帮助信息。

正文

最近经常需要传送文件,学习到rsync这个非常好用的工具。rsync的传输方不像是scp复制粘贴,而是是创建一个镜像,所以在传输效率上比scp命令要快很多,缺点就是对文件的属性如权限、用户、组、时间戳等会忽略,但是加上相关参数就可以很好的使用。在scp传输的过程/mnt和/mnt/在传输之后都会存在mnt这个目录,而rsync命名的/mnt是包含目录本身,而/mnt/是不包含目录本身。
详解:

  1. 客户端构造FileList,FileList包含了需要与服务器同步的所有文件信息对name->id(id用来唯一表示文件例如MD5)。
  2. 客户端将FileList发送到服务器。
  3. 服务器上rsync处理客户端发过来的FileList,构建新的NewFileList。其中根据MD5值比较,删除服务器上已经存在的文件信息对,只保留服务器上不存在或变化的文件。
  4. 客户端得到服务器发送过来的NewFileList,然后把NewFileList中的文件重新传输到服务器。

相关参数


-p, #保留权限
-o, #保留文件的所有人
-g, #保留文件的组
-t, #保留时间戳
-D, #保留设备文件
-v, #verbose 详细模式输出
-q, #quiet 精简输出模式
-c, #checksum 打开校验开关,强制对文件传输进行校验
-a, #archive 归档模式,表示以递归方式传输文件,并保持所有文件属性,等于-rlptgoD
-r, #recursive 对子目录以递归模式处理
-R, #relative 使用相对路径信息
-b, #backup 创建备份,也就是对于目的已经存在有同样的文件名时,将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
	backup-dir 将备份文件(~filename)存放在在目录下。
	suffix=SUFFIX 定义备份文件前缀
-u, #update 仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件。(不覆盖更新的文件)
-l, #links 保留软链结
-L, #copy-links 想对待常规文件一样处理软链结
	copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结
	safe-links 忽略指向SRC路径目录树以外的链结
-H, #hard-links 保留硬链结
-p, #perms 保持文件权限
-o, #owner 保持文件属主信息
-g, #group 保持文件属组信息
-D, #devices 保持设备文件信息
-t, #times 保持文件时间信息
-S, #sparse 对稀疏文件进行特殊处理以节省DST的空间
-n, #dry-run现实哪些文件将被传输
-W, #whole-file 拷贝文件,不进行增量检测
-x, #one-file-system 不要跨越文件系统边界
-B, #block-size=SIZE 检验算法使用的块尺寸,默认是700字节
-e, #rsh=COMMAND 指定替代rsh的shell程序
	rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息
-C, #cvs-exclude 使用和CVS一样的方法自动忽略文件,用来排除那些不希望传输的文件
	existing 仅仅更新那些已经存在于DST的文件,而不备份那些新创建的文件
	delete 删除那些DST中SRC没有的文件
	delete-excluded 同样删除接收端那些被该选项指定排除的文件
	delete-after 传输结束以后再删除
	ignore-errors 及时出现IO错误也进行删除
	max-delete=NUM 最多删除NUM个文件
	partial 保留那些因故没有完全传输的文件,以是加快随后的再次传输
	force 强制删除目录,即使不为空
	numeric-ids 不将数字的用户和组ID匹配为用户名和组名
	timeout=TIME IP超时时间,单位为秒
-I, #ignore-times 不跳过那些有同样的时间和长度的文件
	size-only 当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间
	modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口,默认为0
-T #temp-dir=DIR 在DIR中创建临时文件
	compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份
-P 等同于 #partial
	progress 显示备份过程
-z, #compress 对备份的文件在传输时进行压缩处理
	exclude=PATTERN 指定排除不需要传输的文件模式
	include=PATTERN 指定不排除而需要传输的文件模式
	exclude-from=FILE 排除FILE中指定模式的文件
	include-from=FILE 不排除FILE指定模式匹配的文件
	version 打印版本信息
	address 绑定到特定的地址
	config=FILE 指定其他的配置文件,不使用默认的rsyncd.conf文件
	port=PORT 指定其他的rsync服务端口
	blocking-io 对远程shell使用阻塞IO
-stats 给出某些文件的传输状态
	progress 在传输时现实传输过程
	log-format=formAT 指定日志文件格式
	password-file=FILE 从FILE中得到密码
	bwlimit=KBPS 限制I/O带宽,KBytes per second
-h, #help 显示帮助信息
    文章知识点与官方知识档案匹配,可进一步学习相关知识
    云原生入门技能树首页概览11311 人正在系统学习中

    与[转帖]rsync参数详解相似的内容:

    [转帖]rsync参数详解

    最近经常需要传送文件,学习到rsync这个非常好用的工具。rsync的传输方不像是scp复制粘贴,而是是创建一个镜像,所以在传输效率上比scp命令要快很多,缺点就是对文件的属性如权限、用户、组、时间戳等会忽略,但是加上相关参数就可以很好的使用。在scp传输的过程/mnt和/mnt/在传输之后都会存在

    [转帖]rsync指定密码文件

    rsync -Pav -e "ssh -i xxx/xxx1 -p xxx2" username@serverip:source_data_path target_path xxx/xxx1::密钥文件位置 xxx2:端口 source_data_path:源文件路径 target_path:传输目

    [转帖]03-rsync传输模式(本地传输、远程方式传输、守护进程模式传输)

    https://developer.aliyun.com/article/885801?spm=a2c6h.24874632.expert-profile.282.7c46cfe9h5DxWK 简介: 1.Rsync传输模式 rsync大致使用三种主要的数据传输方式 本地方式 远程方式 守护进程 1

    [转帖]02-rsync备份方式

    https://developer.aliyun.com/article/885789?spm=a2c6h.24874632.expert-profile.283.7c46cfe9h5DxWK 简介: 1.Rsync应用场景 数据同步的方式​ 推:push,上传(upload)​ 将客户端的数据上传

    [转帖]01-rsync备份方式

    https://developer.aliyun.com/article/885783?spm=a2c6h.24874632.expert-profile.284.7c46cfe9h5DxWK 简介: Rsync备份方式 1.rsync概述 rsync是一款开源的备份工具,可以在不同主机之间进行同步

    [转帖]07-rsync企业真实项目备份案例实战(需求收集--服务器配置---客户端配置---报警机制---数据校验---邮件告警)

    https://developer.aliyun.com/article/885820?spm=a2c6h.24874632.expert-profile.279.7c46cfe9h5DxWK 简介: 2.需求描述 客户端需求: 1.客户端每天凌晨1点在服务器本地打包备份(系统配置文件、日志文件、其

    [转帖]lsyncd实时同步搭建指南——取代rsync+inotify

    lsyncd实时同步搭建指南——取代rsync+inotify https://segmentfault.com/a/1190000002737213 1. 几大实时同步工具比较 1.1 inotify + rsync 最近一直在寻求生产服务服务器上的同步替代方案,原先使用的是inotify + r

    [转帖]Linux文件夹对比并提取的差分文件技巧-rsync的妙用

    https://www.xitongjiaocheng.com/linux/2017/45720.html 需求 最近团队正在开发一个版本对比工具,要求是把A1文件夹与A2对比,将A2中的增量部分,输出到update文件夹中,生成增量升级包/差分包。 方案研究 实现该功能的第一反应是,分别遍历2个文

    [转帖]Windows平台下使用 Rclone 挂载 OneDrive 为本地硬盘

    https://zhuanlan.zhihu.com/p/139200172 Rclone (rsync for cloud storage) 是一个命令行程序,用于同步文件和目录,支持常见的 Amazon Drive 、Google Drive 、OneDrive 、Dropbox 等云存储。本文

    [转帖]服务器交互脚本expect

    https://www.cnblogs.com/hongjinping/p/14018554.html 服务器同步: 可以使用rsync同步,但是需要输入用户名密码;这种情况下我们就可以使用expect完成 安装expect包 #yum install expect -y #rsync /etc/p