Início / unix / Perguntas / 419185
Accepted
Ryan Bemrose
Asked: 2018-01-24 13:06:16 +0800 CST

wget usando -i com -O

  • 772

Tenho um db de arquivos para baixar contendo campos para filenamee download_urlcom o formato:

"foo-1.23.4.jar", "http://example.com/files/12345678/download"
"bar-5.67.8.jar", "http://example.com/files/9876543/download"
"baz-3.31.jar", "http://example.com/files/42424242/download"

Onde os urls tendem a ser todos iguais, exceto o número. Tentei exportar a lista de URLs e baixá-los com wget -i, mas todos os arquivos são nomeados downloade não tenho como diferenciá-los.

Normalmente eu usaria o -Oparâmetro para especificar o arquivo de saída correto, mas não tenho certeza de como combinar isso com-i

Como posso formatar o arquivo de entrada e a linha de comando para wget -ique cada linha possa especificar um URL de download e um nome de arquivo de saída?

wget download

1 respostas

  1. Best Answer

    Simultaneamente com o GNU parallel:

    parallel -a files_list.txt -j0 -C ", *" 'wget -q -O {1} {2}'
    • -a input-file- usar input-filecomo fonte de entrada
    • -j N- executar até Ntrabalhos em paralelo. 0significa o máximo possível
    • -C regex- separador de coluna. A entrada será tratada como uma tabela com regexpseparação das colunas. A enésima coluna pode ser acessada usando {n}ou {n.}. Por exemplo {3}, é a terceira coluna
    • 4

relate perguntas