AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 442943
Accepted
iTech
iTech
Asked: 2012-10-28 06:06:00 +0800 CST2012-10-28 06:06:00 +0800 CST 2012-10-28 06:06:00 +0800 CST

如何在 Varnish VCL 中阻止此 URL 模式?

  • 772

我的网站受到垃圾邮件机器人和 scrappers 的严重打击。我用过 Cloudflare,但问题仍然存在。问题是 spambots 访问不存在的 url 导致大量负载到我的 drupal 后端,它一直运行并且 bootstraps db 只是为了提供 404 错误文档。

我不能简单地为所有页面未找到错误抛出非 drupal 404,因为我需要让 drupal 捕获它们。因为,清漆在前面,它可以检查机器人是否表现良好并询问有效的 url - 如果不是,它会为它们提供 404 或 403。这些机器人使用这种模式导致错误:

http://www.megaleecher.net/http:/www.megaleecher.net/Using_iPhone_As_USB_Mass_S/Using_iPhone_As_USB_Mass_S/Using_iPhone_As_USB_Mass_S/Using_iPhone_As_USB_Mass_S/Using_iPhone_As_USB_Mass_S/Using_iPhone_As_USB_Mass_S/Using_iPhone_As_USB_Mass_S/Using_iPhone_As_USB_Mass_Storage

现在,请。建议一个正则表达式 varnbisg VCL 指令,该指令捕获此 URL 模式并从 varnish 提供 404 错误,阻止它到达 apache/drupal ?

spam
  • 3 3 个回答
  • 6090 Views

3 个回答

  • Voted
  1. Best Answer
    Gil Hildebrand
    2012-11-02T08:57:38+08:002012-11-02T08:57:38+08:00

    您是否尝试过寻找以 /http 开头的 url 路径?

    if (req.url ~ "^/https?:") {
      error 404 "Not found" 
    }
    
    • 5
  2. Pax
    2012-10-28T07:10:19+08:002012-10-28T07:10:19+08:00

    您是否考虑过对 404 进行缓存?为了使用正则表达式阻止这些,您需要使 VCL 和后端保持同步以避免阻止有效的 URL。如果您只是缓存 404 很长一段时间,您仍然需要从后端为每个 URL 加载一次,但后续请求将获得缓存的 404 页面。如果您曾经将真实内容添加到具有缓存 404 响应的 URL,则可以进行手动清除。

    • 2
  3. damoncloudflare
    2012-11-06T16:10:46+08:002012-11-06T16:10:46+08:00

    “我的网站受到垃圾邮件机器人和刮刀的严重打击,”

    它们来自相同的 IP 吗?您是否尝试过阻止 IP 地址?

    • 0

相关问题

  • 代表客户发送电子邮件

  • 让 Postfix 以两种方式处理垃圾邮件

  • Linux sendmail 垃圾邮件?

  • 选择什么安全套件?

  • Exchange 2007:将带有 SenderID 的邮件移动到垃圾邮件文件夹失败?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve