AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题

问题[scraping](server)

Martin Hope
kraus christopher
Asked: 2020-07-07 08:56:24 +0800 CST

网站被另一个域镜像

  • 1

所以我的网站被另一个域名镜像,我尝试了很多方法来阻止来自该特定域的访问,但没有希望,我正在使用 cloudflare CDN,并且镜像我的网站的网站也使用它,我试图获取远程地址来源,但它不断随机更改IP(我在这里找到了这个方法,基本上是获取远程地址并使用htaccess角色阻止它)。尝试了http引用方法,它也不起作用。

有什么方法可以帮助吗?

mirroring scraping cloudflare hijack
  • 2 个回答
  • 210 Views
Martin Hope
username
Asked: 2009-05-17 17:19:23 +0800 CST

采用 Google Mini/Google Appliance 进行 Intranet 搜索有多容易/多贵?

  • 4
锁定。这个问题及其答案被锁定,因为这个问题离题但具有历史意义。它目前不接受新的答案或交互。

出于好奇,这里有人使用 Google Mini 或 Google Search Appliance 来提供 Intranet 搜索吗?设置起来容易吗?他们收取什么样的价格(球场数字,我确定这取决于客户)?

search-server scraping intranet google-search-appliance
  • 4 个回答
  • 633 Views
Martin Hope
Randin
Asked: 2009-05-12 16:10:59 +0800 CST

如何避免被刮?

  • 8

我们有一个可搜索的数据库(DB),我们将结果限制为每页 15 个,并且只有 100 个结果,但仍然让人们试图抓取该网站。

我们正在禁止访问速度足够快的网站。我想知道我们是否还有什么可以做的。Flash渲染结果可能吗?

database scraping
  • 7 个回答
  • 996 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve