所以我目前正在尝试使用 wget 设置一个 shell 脚本来从服务器下载大量文件。我正在使用 -A 'pattern*.extension' 选项仅下载具有我感兴趣的特定模式和扩展名的文件。(此外,有很多文件我不想在我的 PC 上浪费空间.) 如果我通过命令行执行 wget,一切正常,它会下载与模式匹配的所有文件。现在,如果我尝试使用与以前完全相同的 wget 命令运行脚本,它会突然显示:“wget: No match”。(我应该提到,shell 脚本是由一个 python 脚本执行的,该脚本提供了一个 ID 列表,用于从特定子文件夹下载文件。)但是:如果我打印 shell 脚本执行的确切 wget 行并将其复制并粘贴到命令中线,它再次起作用。这对我来说毫无意义。
这是我的 wget 的外观:
wget -r -c -nH -np -nd -e robots=off -P PATH -A 'pattern*.extension' -a logfile.log --progress=bar:force --no-check-certificate https://.../ID/
这是我的 shell 脚本原则上的样子:
#!/usr/bin/tcsh
set ID=$1 #just an ID for subfolders
set OPT2=$3 #additional options that can be passed to wget
set OPT="-r -c -nH -np -nd -e robots=off -P PATH/$ID -A 'pattern*.extension' -a $ID.log"
set OOP="--progress=bar:force --no-check-certificate"
while ($1 != '')
echo "wget $OPT $OOP $OPT2 https://.../$ID/"
wget $OPT $OOP $OPT2 https://.../$ID/
shift
end
然后输出如下:
wget -r -c -nH -np -nd -e robots=off -P PATH/ID -A 'pattern*.extension' -a ID.log --progress=bar:force --no-check-certificate https://.../ID/
wget: No match.
但是现在,如果我复制我的脚本回显的那一行,它就可以工作了!请赐教。我一直在努力解决这个问题,但显然,我无法做到这一点。
另外:如果我将 -A 'pattern*.extension' 替换为 -A.extensions,它会下载所有具有该扩展名的文件。由于某种原因,它在使用模式时不起作用。
正如我上面提到的,shell 脚本由 python 脚本调用:
for ID in IDs:
cmd = 'csh PATH/script.csh %s' % (ID)
sub.call( cmd, shell=True )
也许这也有帮助,也许我还应该提到我并不是一个真正的高级程序员。
提前致谢。