Início / unix / Perguntas / 471749
Accepted
sancho.s ReinstateMonicaCellio
Asked: 2018-09-27 22:26:07 +0800 CST

Usando rsync para excluir padrões selecionados, corresponde a todos os arquivos

  • 772

Quero usar rsyncpara remover certos arquivos (para excluir com eficiência um diretório grande contendo milhares de arquivos ), neste caso, dado a um script de shell como padrões na linha de comando.

Até agora, isso é o que eu tenho no meu script de shellrsync_del.sh

#!/bin/bash

TARGET_DIR=${1}
shift
PATTERNS="${@}"
for patt in ${PATTERNS} ; do
    # Both do the same
    #INCLUDE_PATTERNS="${INCLUDE_PATTERNS}"' --include='\'"${patt}"\'
    INCLUDE_PATTERNS="${INCLUDE_PATTERNS} --include=\"${pattern}\""
done

EMPTYDIR=$(mktemp -d)
echo "Created empty dir ${EMPTYDIR}"
comm="rsync -a --progress --delete ${INCLUDE_PATTERNS} ${EMPTYDIR}/ ${TARGET_DIR}"
echo ${comm}
eval ${comm}

Padrões de exemplo que eu gostaria de usar são *[1-9].txt, *000??9.txt. O problema é que, ao executar

rsync_del.sh trg_dir '*[1-9].txt'

a linha de comando gerada é

rsync -a --progress --delete --include='*[1-9].txt' /tmp/tmp.51R9hPgkfG/ trg_dir/

(o que parece ok para mim), mas está combinando, por exemplo, arquivos como input.dat(e eu não quero isso).

Qual é a maneira correta de implementar/usar isso? Suspeito que seja uma questão de escapar adequadamente dos padrões, mas não consegui fazer isso funcionar.

Obs: Preciso definir o comando a ser executado em uma variável, echoantes de executar.

bash shell-script

2 respostas

  1. Não olhando muito de perto o uso real de rsyncaqui e, em vez disso, concentrando-se na criação da rsynclinha de comando.

    #!/bin/bash

target=$1
shift

empty=$( mktemp -d )

trap 'rmdir "$empty"' EXIT

for pattern do
   incl+=( --include="$pattern" )
done

rsync --archive --progress --delete "${incl[@]}" --exclude='*' "$empty"/ "$target"

    Ao usar um array (o inclarray acima), você armazena os argumentos rsyncseparadamente e não como uma string. A expansão de "${incl[@]}"serão os elementos citados individualmente do array. Citar os argumentos torna-se trivial e não há necessidade de chamar eval. Observe também que todas as expansões de parâmetros precisam ser devidamente aspas duplas.

    O problema com seu código é que você usa a maioria das expansões de parâmetro sem aspas. Isso faz com que o shell execute a divisão de palavras e a geração de nome de arquivo (globbing) nas variáveis. Isso, por sua vez, significa que você não pode usar padrões contendo espaços ou padrões de globbing de shell que podem se expandir para nomes de arquivos existentes.

    Pois /bin/sha sintaxe fica ainda menos detalhada:

    #!/bin/sh

target=$1
shift

empty=$( mktemp -d )

trap 'rmdir "$empty"' EXIT

for pattern do
   set -- "$@" --include="$pattern"
   shift
done

rsync --archive --progress --delete "$@" --exclude='*' "$empty"/ "$target"
    • 2
  2. Best Answer

    Esqueci que deveria fechar a lista de padrões excluindo qualquer coisa que não estivesse explicitamente incluída. eu usei

    comm="rsync -a --progress --delete ${INCLUDE_PATTERNS} --exclude=\"*\" ${EMPTYDIR}/ ${TARGET_DIR}"
    • 1

relate perguntas