AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 44110
Accepted
Petrogad
Petrogad
Asked: 2009-07-23 07:40:03 +0800 CST2009-07-23 07:40:03 +0800 CST 2009-07-23 07:40:03 +0800 CST

有没有办法告诉机器人不要看目录?

  • 772

我有一个充满图像的目录,我不想被机器人查看,有没有办法让这个目录私有?

谢谢!

seo
  • 7 7 个回答
  • 157 Views

7 个回答

  • Voted
  1. Best Answer
    nik
    2009-07-23T07:42:00+08:002009-07-23T07:42:00+08:00

    如何在搜索引擎优化 (SEO) 中使用 Robots.txt


    为任何包含您不希望搜索引擎抓取的文件的文件 夹输入“Disallow: /folder name” 。


    或者,为您不希望搜索引擎索引的任何页面或文件输入“Disallow: /filename.filetype” 。

    注意以下示例:

    * Disallow: /private/
    * Disallow: /private/image01.jpg
    
    • 10
  2. Dan Walker
    2009-07-23T07:42:36+08:002009-07-23T07:42:36+08:00

    在站点的根目录中创建一个 robots.txt 文件。在那个文件里面放

    User-agent: *
    Disallow: /images
    
    • 1
  3. foxxtrot
    2009-07-23T07:42:49+08:002009-07-23T07:42:49+08:00

    它被称为robots.txt 文件,大多数机器人都会在您的 robots.txt 中满足您的请求。

    您将需要以下内容:

    User-Agent: *
    Disallow: /path/to/images/
    
    • 1
  4. Randolpho
    2009-07-23T07:41:56+08:002009-07-23T07:41:56+08:00

    你想要robots.txt

    • 0
  5. Webjedi
    2009-07-23T07:42:29+08:002009-07-23T07:42:29+08:00

    是的,像这样:

    User-agent: *
    Disallow: /MyImageDirectory
    
    • 0
  6. Georg Schölly
    2009-07-23T07:43:34+08:002009-07-23T07:43:34+08:00

    在您的根目录中,您可以放置​​一个robots.txt文件,该文件禁止机器人索引特定目录。

    • 0
  7. cas
    2009-07-23T13:48:15+08:002009-07-23T13:48:15+08:00

    robots.txt 只有行为良好的机器人才会遵守。并非所有人都像主要搜索引擎那样表现良好——有些是由无能的小丑编写的,有些是由垃圾邮件发送者编写的电子邮件地址,等等。

    无论如何,您还想为该目录关闭索引...使用 .htaccess 文件或在您的 apache conf 中,如下所示:

    <目录/path/to/images/dir>
      选项 - 索引
    </目录>
    

    或者通过在其中放置一个空白 index.html 文件。


    这将阻止他们看到图像文件的目录列表。它不会阻止他们直接链接到您网站上其他页面的图像。

    实际上,您几乎无法真正阻止机器人访问您的网络服务器上的公共文件,这既不会给您的用户带来不便,也不会通过仅通过仅服务于登录用户的脚本提供图像来增加服务器上的负载(例如通过检查 cookie)。

    • 0

相关问题

  • Googlebot 请求中的奇数查询字符串

  • URL Dash 缺点

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    从 IP 地址解析主机名

    • 8 个回答
  • Marko Smith

    如何按大小对 du -h 输出进行排序

    • 30 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    Windows 中执行反向 DNS 查找的命令行实用程序是什么?

    • 14 个回答
  • Marko Smith

    如何检查 Windows 机器上的端口是否被阻塞?

    • 4 个回答
  • Marko Smith

    我应该打开哪个端口以允许远程桌面?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    MikeN 在 Nginx 中,如何在维护子域的同时将所有 http 请求重写为 https? 2009-09-22 06:04:43 +0800 CST
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    0x89 bash中的双方括号和单方括号有什么区别? 2009-08-10 13:11:51 +0800 CST
  • Martin Hope
    kch 如何更改我的私钥密码? 2009-08-06 21:37:57 +0800 CST
  • Martin Hope
    Kyle Brandt IPv4 子网如何工作? 2009-08-05 06:05:31 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve