代码之家  ›  专栏  ›  技术社区  ›  Amra

在服务器上建一个网站,如何停止搜索引擎查找呢?

  •  0
  • Amra  · 技术社区  · 16 年前

    我想知道,我如何才能使我的网站不被列入搜索引擎,直到我完成它。

    谢谢。

    3 回复  |  直到 15 年前
        1
  •  1
  •   Amadan    16 年前

    最明显的是:不要把它链接到任何地方。

    第二个最明显的问题:提出了身份验证要求( basic , digest )

    http://www.robotstxt.org/ ,特别是 http://www.robotstxt.org/faq/prevent.html

    正如他们所说,请注意 robots.txt 这只是一个建议。谷歌会注意到这一点,但spambots不会。

        2
  •  1
  •   tdammers    16 年前

    谷歌搜索robots.txt。这是一个由所有主要搜索引擎支持的标准,允许你善意地请求一个网络爬虫忽略你的部分或全部网站。

        3
  •  0
  •   Andrew Kennan    16 年前

    你需要在完成之前把它放到网上吗?为什么不保持当地的发展?