SCP和Rsync远程拷贝的几个技巧

梦里梦外; 2022-04-13 04:28 274阅读 0赞

scp是secure copy的简写，用于在Linux下进行远程拷贝文件的命令，和它类似的命令有cp，不过cp只是在本机进行拷贝不能跨服务器，而且scp传输是加密的。可能会稍微影响一下速度。当你服务器硬盘变为只读 read only system时，用scp可以帮你把文件移出来。另外，scp还非常不占资源，不会提高多少系统负荷，在这一点上，rsync就远远不及它了。虽然 rsync比scp会快一点，但当小文件众多的情况下，rsync会导致硬盘I/O非常高，而scp基本不影响系统正常使用。scp在夸机器复制的时候为了提高数据的安全性，使用了ssh连接和加密方式，如果机器之间配置了ssh免密码登录，那在使用scp的时候密码都不用输入。

一般而言，我们会选择使用rsync进行远程同步或拷贝。rsync和scp的区别在于：  
**->** rsync只对差异文件做更新，可以做增量或全量备份；而scp只能做全量备份。简单说就是rsync只传修改了的部分，如果改动较小就不需要全部重传，所以rsync备份速度较快；默认情况下，rsync 通过比较文件的最后修改时间（mtime）和文件的大小（size）来确认哪些文件需要被同步过去。  
**->** rsync是分块校验+传输，scp是整个文件传输。rsync比scp有优势的地方在于单个大文件的一小部分存在改动时，只需传输改动部分，无需重新传输整个文件。如果传输一个新的文件，理论上rsync没有优势；  
**->** rsync不是加密传输，而scp是加密传输，使用时可以按需选择。

**SCP拷贝命令中常用的几个参数说明**

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 </td> 
 <td> <code>-B&nbsp; 使用批处理模式（传输过程中不询问传输口令或短语）&nbsp;</code> <code>-C&nbsp; 允许压缩。（将-C标志传递给</code><code>ssh</code><code>，从而打开压缩功能）&nbsp;</code> <code>-p&nbsp; 保留原文件的修改时间，访问时间和访问权限。&nbsp;</code> <code>-q&nbsp; 不显示传输进度条。&nbsp;</code> <code>-r&nbsp; 递归复制整个目录。&nbsp;</code> <code>-</code><code>v</code>&nbsp;<code>详细方式显示输出。</code><code>scp</code><code>和</code><code>ssh</code><code>(1)会显示出整个过程的调试信息。这些信息用于调试连接，验证和配置问题。&nbsp;&nbsp;</code> <code>-c cipher&nbsp; 以cipher将数据传输进行加密，这个选项将直接传递给</code><code>ssh</code><code>。&nbsp;&nbsp;</code> <code>-F ssh_config&nbsp; 指定一个替代的</code><code>ssh</code><code>配置文件，此参数直接传递给</code><code>ssh</code><code>。&nbsp;</code> <code>-i identity_file&nbsp; 从指定文件中读取传输时使用的密钥文件，此参数直接传递给</code><code>ssh</code><code>。&nbsp;&nbsp;&nbsp;</code> <code>-l limit&nbsp; 限定用户所能使用的带宽，以Kbit</code><code>/s</code><code>为单位。&nbsp;&nbsp;&nbsp;&nbsp;</code> <code>-o ssh_option&nbsp; 如果习惯于使用ssh_config(5)中的参数传递方式，&nbsp;&nbsp;</code> <code>-P port&nbsp; 注意是大写的P, port是指定数据传输用到的端口号&nbsp;&nbsp;</code> <code>-S program&nbsp; 指定加密传输时所使用的程序。此程序必须能够理解</code><code>ssh</code><code>(1)的选项。</code> </td> 
 </tr> 
 </tbody> 
</table>

**Rsync拷贝命令中常用的几个参数说明**

在使用SCP和Rsync进行远程同步的时候，需要注意下面几个技巧：

**1）远程拷贝时的软链接处理**

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 </td> 
 <td> <code>用</code><code>rsync</code><code>远程拷贝目录时，只需要加上-l参数就可以实现拷贝软链接。</code> &nbsp; <code>用</code><code>scp</code><code>远程拷贝目录时， 那么目录下的软链会丢失，如果想要软链接也拷贝过去，正确的做法是：</code> <code>1）在源服务器上， 打包，&nbsp;</code><code>tar</code>&nbsp;<code>zcvf&nbsp;</code><code>test</code><code>.</code><code>tar</code><code>.gz&nbsp;</code><code>test</code> <code>2）把源服务器上的</code><code>test</code><code>.</code><code>tar</code><code>.gz拷贝到目标服务器上</code> <code>3）在目标服务器上执行</code><code>tar</code>&nbsp;<code>zxvf&nbsp;</code><code>test</code><code>.</code><code>tar</code><code>.gz， 进行解包， 可以看到， 软链接保持得好好的。</code> </td> 
 </tr> 
 </tbody> 
</table>

**2）远程拷贝时的进度条显示**

**3）远程拷贝时的限流**

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 </td> 
 <td> <code>rsync</code><code>拷贝命令（--bwlimit）</code> <code>[root@dbtest bak]</code><code># rsync -auvz --progress --delete --bwlimit=1000 远程文件 本地文件 //限制为1000kBytes/s</code> <code>[root@dbtest bak]</code><code># rsync -auvz --progress --delete --bwlimit=2048 远程文件 本地文件 //限制为2M/s</code> &nbsp; <code>scp</code><code>拷贝命令（-l参数）</code> <code>[root@dbtest bak]</code><code># scp -l 1024 file root@192.168.1.100 //限制为1M Bytes/s</code> </td> 
 </tr> 
 </tbody> 
</table>

**4）远程拷贝时的过滤**

**5）远程拷贝时的隐藏文件**

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 </td> 
 <td> <code>-----</code><code>rsync</code><code>命令-----</code> <code>如下（注意带/）</code> <code>可以将</code><code>/path/to/source/</code><code>目录下所有的文件（包括隐藏文件）一起拷贝到192.168.1.5机器的</code><code>/path/to/dest/</code><code>目录下</code> <code>[root@dbtest bak]</code><code># rsync -e "ssh -p22" -avpgolr /path/to/source/ user@192.168.1.5:/path/to/dest/</code> <code>&nbsp;</code>&nbsp; <code>如下（注意带/*）</code> <code>可以将</code><code>/path/to/source/</code><code>目录下所有的文件（不包括隐藏文件）一起拷贝到192.168.1.5机器的</code><code>/path/to/dest/</code><code>目录下</code> <code>[root@dbtest bak]</code><code># rsync -e "ssh -p22" -avpgolr /path/to/source/* user@192.168.1.5:/path/to/dest/</code> <code>&nbsp;</code>&nbsp; <code>-----</code><code>scp</code><code>命令-----</code> <code>如下（注意带）</code> <code>可以将</code><code>/path/to/source/</code><code>目录下所有的文件（包括隐藏文件）一起拷贝到192.168.1.5机器的</code><code>/path/to/dest/</code><code>目录下</code> <code>[root@dbtest bak]</code><code># scp -rp -P 22 /path/to/source/. user@192.168.1.5:/path/to/dest/</code> &nbsp; <code>如果直接使用/，则就是把</code><code>/path/to/source</code><code>整个目录拷贝到192.168.1.5机器的</code><code>/path/to/dest/</code><code>目录下，即拷贝到远程</code> <code>的目录是</code><code>/path/to/dest/source</code> <code>[root@dbtest bak]</code><code># scp -rp -P 22 /path/to/source/ user@192.168.1.5:/path/to/dest/</code> &nbsp; <code>如下（注意/*）</code> <code>可以将</code><code>/path/to/source/</code><code>目录下所有的文件（不包括隐藏文件）一起拷贝到192.168.1.5机器的</code><code>/path/to/dest/</code><code>目录下</code> <code>[root@dbtest bak]</code><code># scp -rp -P 22 /path/to/source/* user@192.168.1.5:/path/to/dest/</code> &nbsp; <code>---------------</code> <code>注意，直接使用</code><code>rm</code><code>或</code><code>rm</code>&nbsp;<code>-rf删除一个目录时，默认目录下的隐藏文件是删除不掉的，隐藏文件需要单独删除，如下：</code> <code>[root@dbtest ~]</code><code># cd /opt/</code> <code>[root@dbtest opt]</code><code># ll -a</code> <code>total 28</code> <code>drwxr-xr-x.&nbsp; 3 root root 4096 Mar&nbsp; 8 15:00 .</code> <code>dr-xr-xr-x. 27 root root 4096 Feb 26 03:54 ..</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp;&nbsp; 0 Mar&nbsp; 8 09:47 ac</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp; 45 Mar&nbsp; 8 09:47 a.txt</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp;&nbsp; 0 Mar&nbsp; 8 09:47 bb</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp; 21 Mar&nbsp; 8 09:45 b.txt</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp;&nbsp; 0 Mar&nbsp; 8 09:47 gg</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp; 52 Mar&nbsp; 8 15:00 .haha</code> <code>drwxr-xr-x.&nbsp; 2 root root 4096 Mar&nbsp; 8 15:00 .kevin</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp; 33 Mar&nbsp; 8 15:00 .my.cnf</code> <code>[root@dbtest opt]</code><code># rm -rf ./*</code> <code>[root@dbtest opt]</code><code># ll -a</code> <code>total 20</code> <code>drwxr-xr-x.&nbsp; 3 root root 4096 Mar&nbsp; 8 17:44 .</code> <code>dr-xr-xr-x. 27 root root 4096 Feb 26 03:54 ..</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp; 52 Mar&nbsp; 8 15:00 .haha</code> <code>drwxr-xr-x.&nbsp; 2 root root 4096 Mar&nbsp; 8 15:00 .kevin</code> <code>-rw-r--r--.&nbsp; 1 root root&nbsp;&nbsp; 33 Mar&nbsp; 8 15:00 .my.cnf</code> <code>[root@dbtest opt]</code><code># rm -rf .haha .kevin .my.cnf</code> <code>[root@dbtest opt]</code><code># ll -a</code> <code>total 8</code> <code>drwxr-xr-x.&nbsp; 2 root root 4096 Mar&nbsp; 8 17:44 .</code> <code>dr-xr-xr-x. 27 root root 4096 Feb 26 03:54 ..</code> </td> 
 </tr> 
 </tbody> 
</table>

\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*当你发现自己的才华撑不起野心时，就请安静下来学习吧\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*