AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 723293
Accepted
xralf
xralf
Asked: 2022-11-02 12:48:01 +0800 CST2022-11-02 12:48:01 +0800 CST 2022-11-02 12:48:01 +0800 CST

如何更好地使用 rsync 制作脚本

  • 772

我有以下脚本rsync用于备份和同步我的文件。

我怎样才能使这个脚本更紧凑、更快并且具有更好的错误处理能力?

#!/bin/sh
  
errors=""

sudo rsync -avh --delete --no-o --no-g /home/xralf/audio /media/extdevice/rsync_backups/
if [ "$?" -eq "0" ]
then
  echo "no errors in audio"
else
  errors="${errors}error in audio\n"
fi

sudo rsync -avh --delete --no-o --no-g /home/xralf/books /media/extdevice/rsync_backups/
if [ "$?" -eq "0" ]
then
  echo "no errors in books"
else
  errors="${errors}error in books\n"
fi

sudo rsync -avh --delete --no-o --no-g /home/xralf/source_code /media/extdevice/rsync_backups/
if [ "$?" -eq "0" ]
then
  echo "no errors in source_code"
else
  errors="${errors}error in source_code\n"
fi

# more such directories with this code pattern

echo ${errors}

后来我打算不看脚本执行,所以我只想看到结果并相信一切顺利。我运行了脚本,但最后,我拥有的唯一信息是error in source_code,我看不到究竟是什么错误(是哪个文件导致的)。

shell
  • 4 4 个回答
  • 135 Views

4 个回答

  • Voted
  1. terdon
    2022-11-02T13:09:20+08:002022-11-02T13:09:20+08:00

    如果您不是被迫使用sh但可以使用更复杂的 shell,例如bash,您可以执行以下操作:

    #!/bin/bash
    
    dirs=( "audio" "books" "source_code" );
    errors=()
    for dir in "${dirs[@]}"; do
      sudo rsync \
           -avh --delete --no-o --no-g \
           /home/xralf/"$dir" \
           /media/extdevice/rsync_backups/ &&
        echo "no errors in $dir" ||
          errors+=("error in $dir\n")
    done
    
    printf '%s\n' "${errors[@]}"
    

    您可能还想捕获 stderr ,但这与您的脚本做同样的事情。

    • 4
  2. Best Answer
    Uriel
    2022-11-06T04:45:06+08:002022-11-06T04:45:06+08:00

    如果您的优先级是紧凑和快速(即:最小化进程数量,但在这种情况下,您受到磁盘 IO 的限制,而不是 CPU 或内存):

    #!/bin/bash
    sudo rsync -a --delete --no-o --no-g \
           /home/xralf/{audio,books,source_code} \
           /media/extdevice/rsync_backups/ &&
        echo "rsync completed successfully" 1>&2 || echo "rsync ended with errors" 1>&2
    

    删除该-v选项将使输出噪音更小,以便您可以专注于显式错误(如果有)。将1>&2STDOUT 重定向到 STDERR,以便将错误消息发送到预期的位置。如果在无人值守的情况下运行,则以下替代方案可能比内置的更好echo,但代价是额外的进程:

    1. 服务器可以logger用来将消息发送到以syslog进行集中处理。确切的语法将取决于服务器配置。

    2. 用于date添加计时信息,脚本的最后一行变为:

    date +"[%Y/%m/%d %H:%M:%S] rsync completed successfully" 1>&2 || \
    date +"[%Y/%m/%d %H:%M:%S] rsync ended with errors" 1>&2
    

    一些它会输出类似的东西[2022/11/05 14:37:27] rsync completed successfully

    • 4
  3. MDeBusk
    2022-11-06T09:43:44+08:002022-11-06T09:43:44+08:00

    该rsync命令接受参数--log-file=FILE。备份完成后,您可以检查它是否有错误。

    为了效率,它也接受--exclude-from=FILEand --include-from=FILE。您可以创建包含您所做和不想备份的所有内容的列表的文本文件,并从单个rsync命令而不是多个命令调用它们。

    请参阅man rsync或联机手册页。

    • 1
  4. john-jones
    2022-11-06T13:04:57+08:002022-11-06T13:04:57+08:00

    创建一个名为module.sh的文件并为其提供以下文本:

    #!/usr/bin/env bash                                                                                                                     
    
    # -A=Archive. Use recursion and preserve almost everything.
    # -V=Verbose.
    # -H=Preserve hard links.
    # -Z=Compress.
    # --Delete=
    #     If node in directory 'from' gets deleted,
    #     delete it in directory 'to'.
    # --No-o=No Owner. 
    # --No-g=No Group.
    # The --No's are partially undoing the Archive option.
    
    sync_dir(){
        local from="${1}";
        local to="${2}";
    
        rsync               \
            -avhz           \
            --delete        \
            --no-o          \
            --no-g          \
                "${from}/"  \
                "${to}"     \
            1>/dev/null     \
            ;
    
        # Store the sync success.
        local sync_result="${?}";
    
        # The project name is the last directory of the from string.
        local project_name=$(grep -oE '[^/]*$' <<<"${from}");
    
        local error="No error in: ${project_name}";
        if [ "${sync_result}" -ne "0" ]; then
            error="Error in: ${project_name}\n";
            fi  
        printf "${error}\n";
        };
    

    然后你制作另一个文件并从那里获取模块:

    #!/usr/bin/env bash
                                                                           
    . ./module.sh;
    
    sync_dir '/home/xralf/audio' '/media/extdevice/rsync_backups/';
    # More sync dirs here.
    

    注意不同的 Shebang,这个是 POSIX 兼容的。

    我还添加了 Rsync 的 -z 选项。它压缩途中的数据。

    • 0

相关问题

  • 这个命令是如何工作的?mkfifo /tmp/f; 猫/tmp/f | /bin/sh -i 2>&1 | 数控 -l 1234 > /tmp/f

  • FreeBSD 的 sh:列出函数

  • 有没有办法让 ls 只显示某些目录的隐藏文件?

  • grep -v grep 有什么作用

  • 如何将带有〜的路径保存到变量中?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve