AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / ubuntu / 问题 / 1244980
Accepted
MichaelB
MichaelB
Asked: 2020-05-30 11:02:32 +0800 CST2020-05-30 11:02:32 +0800 CST 2020-05-30 11:02:32 +0800 CST

回显所有匹配正则表达式的 URL

  • 772

对于我正在处理的项目,我需要获取域的某个文件夹中所有 URL 的列表,或者更好的是所有与正则表达式匹配的 URL。

我想使用 bash 来执行此操作,以避免安装任何我最终不会使用的程序,但如果有使用我可能已经拥有的程序的解决方案,例如 FireFox,请继续告诉我。

谢谢你的时间。

bash webserver https
  • 1 1 个回答
  • 395 Views

1 个回答

  • Voted
  1. Best Answer
    MichaelB
    2020-06-01T07:18:12+08:002020-06-01T07:18:12+08:00

    我想出了如何在我的情况下管理它,对于其他任何人来说应该是一样的,你应该能够调整这个过程以适用于任何 URL。

    1. 切换到新目录
      首先我们应该切换到一个新目录,以避免文件丢失或在需要后被保留。
      mkdir ~/Desktop/dev
      cd ~/Desktop/dev
    2. Get URLs withwget
      Next 我们使用wget命令来查找域中文件和文件夹的所有 URL,对我来说,命令是:
      wget -o ./urls.txt --spider -r --reject="index.html" --no-verbose --no-parent https://downloads.tuxfamily.org/godotengine/
      只需替换上述命令中的 URL,它就会创建一个urls.txt包含 URL 和一堆的文本文件 ()其他的废话。
    3. 删除留下的文件夹wget
      wget将留下一个文件夹,该文件夹名为您输入 URL 的域。此文件夹中没有重要信息,因此请继续使用rm命令或通过文件管理器将其删除。
    4. 构建一个正则表达式来提取实际的 URL
      这是困难的部分,我建议urls.txt在文本编辑中打开,或者允许使用正则表达式查找并在浏览器中打开正则表达式,现在你必须构建一个 . 一旦找到与 URL 匹配的正则表达式,请运行命令:
      grep -o -E "(https.*\/([0-9](\.[0-9])+)\/(mono\/)?Godot_v\2[-_]stable[_-](mono_)?((win)?(x11[\._])?(osx\.?)?)((32)?(64)?)?((\.exe)?(\.fat)?)\.zip)" ./urls.txt >> urls\ filtered.txt
      这会将与正则表达式匹配的所有行复制到文本文件 ( urls filtered.txt)。用您的正则表达式替换正则表达式(引号中的位)。

    毕竟,您应该留下一个包含您需要的所有 URL 的文本文件。

    • 0

相关问题

  • 同时复制到两个位置

  • 如何在 shell 脚本中创建选择菜单?

  • 从 bash 迁移到 zsh [关闭]

  • bashrc 还是 bash_profile?

  • 备份 bash 脚本未压缩其 tarball

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    如何运行 .sh 脚本?

    • 16 个回答
  • Marko Smith

    如何安装 .tar.gz(或 .tar.bz2)文件?

    • 14 个回答
  • Marko Smith

    如何列出所有已安装的软件包

    • 24 个回答
  • Marko Smith

    无法锁定管理目录 (/var/lib/dpkg/) 是另一个进程在使用它吗?

    • 25 个回答
  • Martin Hope
    Flimm 如何在没有 sudo 的情况下使用 docker? 2014-06-07 00:17:43 +0800 CST
  • Martin Hope
    Ivan 如何列出所有已安装的软件包 2010-12-17 18:08:49 +0800 CST
  • Martin Hope
    La Ode Adam Saputra 无法锁定管理目录 (/var/lib/dpkg/) 是另一个进程在使用它吗? 2010-11-30 18:12:48 +0800 CST
  • Martin Hope
    David Barry 如何从命令行确定目录(文件夹)的总大小? 2010-08-06 10:20:23 +0800 CST
  • Martin Hope
    jfoucher “以下软件包已被保留:”为什么以及如何解决? 2010-08-01 13:59:22 +0800 CST
  • Martin Hope
    David Ashford 如何删除 PPA? 2010-07-30 01:09:42 +0800 CST

热门标签

10.10 10.04 gnome networking server command-line package-management software-recommendation sound xorg

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve