Linux 下使用 rsync 编写文件同步脚本

不念不忘少年蓝@ 2023-01-19 04:39 21阅读 0赞

# 一、需求说明 #

在网上学习大数据视频时，需要在虚拟机上搭建集群，这里的集群有hadoop102 hadoop103 hadoop104 三台centos服务器

那么往往为了便捷，在集群中的一台服务器上修改了文件后，需要同步到集群中的其它服务器上，文件的同步我们可以使用scp 或者rsync命令，但是来回敲命令比较麻烦

那么视频中有讲到一个分发脚本 xsync,这里做整理，方便后面使用学习。

--------------------

# 二、具体操作  #

首先，为了使脚本在任何目录下都可以使用，我们默认将脚本放在/home/用户名/bin目录下，因为在我们进行echo $PATH 查看环境变量时，会发现环境变量里会有个默认的路径就是

/home/用户名/bin ;注意其中的用户名是你实际的用户名,例如我的就是yyj，则全目录就是/home/yyj/bin。

*  第一步，在/home/yyj目录下创建bin目录

mkdir bin  #创建bin目录
    cd bin  #进入bin目录

*  第二步：创建脚本文件

vim xsync

编辑脚本，内容如下：

#!/bin/bash
    
    #1.判断参数个数
    if [ $# -lt 1 ]
    then
       echo Not Enough Arguement!
       exit;
    fi
    
    #2.遍历集群所有机器
    for host in hadoop102 hadoop103 hadoop104
    do
         echo =======================$host ===================
         #3.遍历所有目录，挨个发送
         for file in $@
         do
           #4.判断文件是否存在
           if [ -e $file ]
              then
                 #5. 获取父目录
                 pdir=$(cd -P $(dirname $file); pwd)
                 #6. 获取当前文件的名称
                 fname=$(basename $file)
                 ssh $host "mkdir -p $pdir"
                 rsync -av $pdir/$fname $host:$pdir
              else
                 echo $file does not exists!
           fi
          done
     done

注意里面的hadoop102 hadoop103 hadoop104 是我提前定义好的集群中的三个主机名，且在其中的hosts文件中配置好了虚拟域名映射，你这里如果没有，可以直接使用哦ip地址；

*  第三步：给xsync脚本文件赋予执行权限

chmod 777 xsync

*  第四步：使用xsync同步文件，可以一次同步多个

xsync a.txt # 例如同步a.txt 到其集群中的其它服务器中

值得注意的是，有些系统文件是需要sudo权限去同步的，那么则使用命令

sudo ./bin/xsync filename