windows 2003下 rsync排除指定目录或文件进行同步

很常见的情况：我想同步/myweb下的 一些php文件 ，  但是不想复制/myweb/log/里边的一些日志文件，因为这些文件太大了，备份也是没有意义的。 现在如果想避开某个路径  直接添加—exclude 即可 比如—exclude “./log” –exclude ‘./log/file’
Note: the directory path is relative to the folder you are backing up.

rsync备份时排除指定目录或文件

要排除指定目录，可以在客户端命令行中使用–exclude-from命令

例如
rsync -vzrtopg –progress –delete –exclude-from=/home/pcfile [email protected] /back/xxx

pcfile文件中，每条记录占一行，支持通配符
/tmp         ## 排除名为 tmp 的根目录
.[a-z]*     ## 不备份以点开头的隐藏文件

注意：这个路径必须是一个相对路径，不能是绝对路径

例子：源服务器/home/yjwan/bashshell有一个checkout文件夹

[root@CentOS5-4 bashshell]# ls -dl checkout

drwxr-xr-x 2 root root 4096 Aug 21 09:14 checkou

现在想要完全避开复制这个文件夹内容怎么办？

目标服务器执行

rsync -av –exclude “checkout” [email protected]:/home/yjwan/bashshell /tmp

将不会复制这个文件夹

[root@free /tmp/bashshell]# ls -d /tmp/bashshell/checkout

ls: /tmp/bashshell/checkout: No such file or directory

注意:

1事实上，系统会把文件和文件夹一视同仁，如果checkout是一个文件，一样不会复制

2 如果想避开复制checkout里面的内容，可以这么写—exclude “checkout/123”

3 切记不可写为 —exclude “/checkout”这样绝对路径

这样写 将不会避免checkout被复制

比如

[root@free /tmp/bashshell]# rsync -av –exclude “/checkout” [email protected]:/home/yjwan/bashshell /tmp

receiving file list … done

bashshell/checkout/

4可以使用通配符 避开不想复制的内容

比如—exclude “fire*”

那么fire打头的文件或者文件夹全部不会被复制

5如果想要避开复制的文件过多，可以这么写

–exclude-from=/exclude.list

exclude.list 是一个文件，放置的位置是绝对路径的/exclude.list ，为了避免出问题，最好设置为绝对路径。

里面的内容一定要写为相对路径

比如 我想避开checkout文件夹和fire打头的文件

那么/exclude.list 写为

checkout

fire*

然后执行以下命令，注意写为–exclude-from或者–exclude-from=都可以

但是不能为—exclude

rsync -av –exclude-from=”/exclude.list” [email protected]:/home/yjwan/bashshell /tmp

检查结果：确实避开了checkout文件夹和fire打头的文件

问题：如何计算对比复制以后的文件数量是否正确呢？
1 查看错误日志，看是否复制时候出问题了

2在源服务器执行可知道具体文件和文件夹的总个数

ls –AlR|grep “^[-d]”|wc

然后目标服务器在计算一遍个数

看看数字是不是能对的上就ok了

对不上再研究怎么回事

3现在的问题是：如果我使用了—exclude参数就麻烦了

我怎么知道要复制几个文件？

首先，前面命令时候提到过一种写法，就是只有源地址，没有目标地址的写法，这种写法可以用来列出所有应该被复制的文件

那么用这个命令，可以计算出这个/root/bashshell下面文件和文件夹数量

在服务器端执行

[root@CentOS5-4 bashshell]# rsync -av /root/bashshell/ |grep “^[-d]” | wc

62     310    4249

和ls 得到的结果一致的

[root@CentOS5-4 bashshell]# ls -AlR |grep “^[-d]“|wc

62     558    3731

因此，比如说我不要fire 打头的文件，可以在服务器端先这样计算要复制的文件

[root@CentOS5-4 bashshell]# rsync -av –exclude “fire*” /root/bashshell/ |grep “^[-d]” | wc

44     220    2695

然后复制过去

看目标机器的文件和文件夹数量为

[root@free /tmp]# ls -AlR /tmp/bashshell/  |grep “^[-d]“|wc

44     396    2554

可以知道2者是同步的

问题：Rsync的其他几个常见参数
1

-z        –compress              compress file data during the transfer

–compress-level=NUM    explicitly set compression level

–skip-compress=LIST    skip compressing files with suffix in LIST

压缩传输，如果网络带宽不够，那么应该压缩以后传输，消耗的当然是机器资源，但是如果内网传输的话，文件数量不是很多的话，这个参数不必要的。

2

-password-file=FILE

前面说过了，只有远端机器是rsync服务器，才能用这个参数

如果你以为个FILE写的是ssh 登陆的密码，那就大错特错了，不少人犯了这个错误。

3

–stats: Adds a little more output regarding the file transfer status.

4

–progress: shows the progress of each file transfer. Can be useful to know if you have large files being backup up.

当然也可以rsync同步指定目录了，具体如下

rsync使用–include参数与–exclude参数来实现同步指定目录，并且–exclude目录放在后面。

例如：

linux上文件目录

ls /usr/local/apache/htdocs/site
aa
bb
cc
dd
ee
..
zz
只想同步aa,bb,ee这三个目录，其他的不同步。

实现代码:

/usr/local/rsync/bin/rsync -azv  --include "aa/" --include "bb/" --include "ee"  --exclude "/*"  --progress rsync://127.0.0.1/site /work/backup/htdocs_bak/site

说明：

–include “aa/” –include “bb/” –include “ee” 包含了你要同步的目录 –exclude包含了不同步的目录所有用“/*”指定。
–exclude “/*” 除了–include同步的目录外，排除其他目录
rsync://127.0.0.1/site 为你rsync服务端要同步的目录
/work/backup/htdocs_bak/site 为你客户端的目录