Início / unix / Perguntas / 723293
Accepted
xralf
Asked: 2022-11-02 12:48:01 +0800 CST

Como melhorar o script com rsync

  • 772

Eu tenho o seguinte script usando rsyncpara backup e sincronização dos meus arquivos.

Como posso tornar este script mais compacto, rápido e com melhor tratamento de erros?

#!/bin/sh
  
errors=""

sudo rsync -avh --delete --no-o --no-g /home/xralf/audio /media/extdevice/rsync_backups/
if [ "$?" -eq "0" ]
then
  echo "no errors in audio"
else
  errors="${errors}error in audio\n"
fi

sudo rsync -avh --delete --no-o --no-g /home/xralf/books /media/extdevice/rsync_backups/
if [ "$?" -eq "0" ]
then
  echo "no errors in books"
else
  errors="${errors}error in books\n"
fi

sudo rsync -avh --delete --no-o --no-g /home/xralf/source_code /media/extdevice/rsync_backups/
if [ "$?" -eq "0" ]
then
  echo "no errors in source_code"
else
  errors="${errors}error in source_code\n"
fi

# more such directories with this code pattern

echo ${errors}

Mais tarde pretendo não assistir a execução do script, então gostaria de ver apenas o resultado e acreditar que tudo deu certo. Executei o script, mas no final, a única informação que tenho é error in source_code, e não consigo ver, qual é exatamente o erro (qual arquivo o causou).

shell

4 respostas

  1. Se você não é forçado a usar sh, mas pode usar um shell mais complexo como bash, você pode fazer algo assim:

    #!/bin/bash

dirs=( "audio" "books" "source_code" );
errors=()
for dir in "${dirs[@]}"; do
  sudo rsync \
       -avh --delete --no-o --no-g \
       /home/xralf/"$dir" \
       /media/extdevice/rsync_backups/ &&
    echo "no errors in $dir" ||
      errors+=("error in $dir\n")
done

printf '%s\n' "${errors[@]}"

    Você provavelmente também deseja capturar stderr, mas isso faz a mesma coisa que seu script.

    • 4
  2. Best Answer

    Se sua prioridade é ser compacto e rápido (ou seja: minimizar o número de processos, mas neste caso você está limitado por seus IOs de disco, não por CPU ou memória):

    #!/bin/bash
sudo rsync -a --delete --no-o --no-g \
       /home/xralf/{audio,books,source_code} \
       /media/extdevice/rsync_backups/ &&
    echo "rsync completed successfully" 1>&2 || echo "rsync ended with errors" 1>&2

    A remoção da -vopção tornará a saída menos ruidosa, para que você possa se concentrar em erros explícitos, se houver. O 1>&2redireciona STDOUT para STDERR, para que as mensagens de erro sejam enviadas onde esperado. Se estiver executando sem supervisão, as seguintes alternativas podem ser melhores opções do que o built-in echo, ao custo de um processo extra:

    1. um servidor pode usar loggerpara enviar a mensagem syslogpara manipulação centralizada. A sintaxe exata dependerá da configuração do servidor.

    2. usando datepara adicionar informações de tempo, com a última linha do script se tornando:

    date +"[%Y/%m/%d %H:%M:%S] rsync completed successfully" 1>&2 || \
date +"[%Y/%m/%d %H:%M:%S] rsync ended with errors" 1>&2

    alguns que ele produzirá algo como[2022/11/05 14:37:27] rsync completed successfully

    • 4

  3. O rsynccomando aceita o parâmetro --log-file=FILE. Você pode examiná-lo em busca de erros quando o backup estiver concluído.

    Por uma questão de eficiência, também aceita --exclude-from=FILEe --include-from=FILE. Você pode criar arquivos de texto contendo uma lista de tudo o que você faz e não deseja fazer backup e chamá-los de um único rsynccomando em vez de vários.

    Consulte man rsyncou a página de manual online .

    • 1

  4. Crie um arquivo chamado module.sh e dê a ele o seguinte texto:

    #!/usr/bin/env bash                                                                                                                     

# -A=Archive. Use recursion and preserve almost everything.
# -V=Verbose.
# -H=Preserve hard links.
# -Z=Compress.
# --Delete=
#     If node in directory 'from' gets deleted,
#     delete it in directory 'to'.
# --No-o=No Owner. 
# --No-g=No Group.
# The --No's are partially undoing the Archive option.

sync_dir(){
    local from="${1}";
    local to="${2}";

    rsync               \
        -avhz           \
        --delete        \
        --no-o          \
        --no-g          \
            "${from}/"  \
            "${to}"     \
        1>/dev/null     \
        ;

    # Store the sync success.
    local sync_result="${?}";

    # The project name is the last directory of the from string.
    local project_name=$(grep -oE '[^/]*$' <<<"${from}");

    local error="No error in: ${project_name}";
    if [ "${sync_result}" -ne "0" ]; then
        error="Error in: ${project_name}\n";
        fi  
    printf "${error}\n";
    };

    Então você cria outro arquivo e origina o módulo de lá:

    #!/usr/bin/env bash
                                                                       
. ./module.sh;

sync_dir '/home/xralf/audio' '/media/extdevice/rsync_backups/';
# More sync dirs here.

    Observe o Shebang diferente, este é compatível com POSIX.

    Eu também adicionei a opção -z do Rsync. Ele comprime os dados em rota.

    • 0

relate perguntas