AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / user-833206

F. Emmerich's questions

Martin Hope
F. Emmerich
Asked: 2018-05-24 03:15:45 +0800 CST

使用模式在 shell 脚本中 wget

  • 1

所以我目前正在尝试使用 wget 设置一个 shell 脚本来从服务器下载大量文件。我正在使用 -A 'pattern*.extension' 选项仅下载具有我感兴趣的特定模式和扩展名的文件。(此外,有很多文件我不想在我的 PC 上浪费空间.) 如果我通过命令行执行 wget,一切正常,它会下载与模式匹配的所有文件。现在,如果我尝试使用与以前完全相同的 wget 命令运行脚本,它会突然显示:“wget: No match”。(我应该提到,shell 脚本是由一个 python 脚本执行的,该脚本提供了一个 ID 列表,用于从特定子文件夹下载文件。)但是:如果我打印 shell 脚本执行的确切 wget 行并将其复制并粘贴到命令中线,它再次起作用。这对我来说毫无意义。

这是我的 wget 的外观:

wget -r -c -nH -np -nd -e robots=off -P PATH -A 'pattern*.extension' -a logfile.log --progress=bar:force --no-check-certificate  https://.../ID/

这是我的 shell 脚本原则上的样子:

#!/usr/bin/tcsh
set ID=$1  #just an ID for subfolders
set OPT2=$3  #additional options that can be passed to wget
set OPT="-r -c -nH -np -nd -e robots=off -P PATH/$ID -A 'pattern*.extension' -a $ID.log"
set OOP="--progress=bar:force --no-check-certificate" 
while ($1 != '')    
     echo "wget $OPT $OOP $OPT2 https://.../$ID/"
     wget $OPT $OOP $OPT2 https://.../$ID/
 shift
end 

然后输出如下:

wget -r -c -nH -np -nd -e robots=off -P PATH/ID -A 'pattern*.extension'  -a ID.log --progress=bar:force --no-check-certificate https://.../ID/
wget: No match.

但是现在,如果我复制我的脚本回显的那一行,它就可以工作了!请赐教。我一直在努力解决这个问题,但显然,我无法做到这一点。

另外:如果我将 -A 'pattern*.extension' 替换为 -A.extensions,它会下载所有具有该扩展名的文件。由于某种原因,它在使用模式时不起作用。

正如我上面提到的,shell 脚本由 python 脚本调用:

for ID in IDs:
    cmd = 'csh PATH/script.csh %s' % (ID)
    sub.call( cmd, shell=True )

也许这也有帮助,也许我还应该提到我并不是一个真正的高级程序员。

提前致谢。

scripts command-line wget tcsh
  • 1 个回答
  • 2180 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    如何运行 .sh 脚本?

    • 16 个回答
  • Marko Smith

    如何安装 .tar.gz(或 .tar.bz2)文件?

    • 14 个回答
  • Marko Smith

    如何列出所有已安装的软件包

    • 24 个回答
  • Marko Smith

    无法锁定管理目录 (/var/lib/dpkg/) 是另一个进程在使用它吗?

    • 25 个回答
  • Martin Hope
    Flimm 如何在没有 sudo 的情况下使用 docker? 2014-06-07 00:17:43 +0800 CST
  • Martin Hope
    Ivan 如何列出所有已安装的软件包 2010-12-17 18:08:49 +0800 CST
  • Martin Hope
    La Ode Adam Saputra 无法锁定管理目录 (/var/lib/dpkg/) 是另一个进程在使用它吗? 2010-11-30 18:12:48 +0800 CST
  • Martin Hope
    David Barry 如何从命令行确定目录(文件夹)的总大小? 2010-08-06 10:20:23 +0800 CST
  • Martin Hope
    jfoucher “以下软件包已被保留:”为什么以及如何解决? 2010-08-01 13:59:22 +0800 CST
  • Martin Hope
    David Ashford 如何删除 PPA? 2010-07-30 01:09:42 +0800 CST

热门标签

10.10 10.04 gnome networking server command-line package-management software-recommendation sound xorg

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve