如何从搜索引擎中完全隐藏网站？

Question

什么是最好的推荐方式哟隐藏我的登台网站从搜索引擎，我谷歌搜索，并发现一些说，我应该把一个元标签，有人说，我应该把一个文本文件内我的网站目录，我想知道标准方式。

我目前的网站是在asp.net中，而我认为它必须是任何网站的常用方式，无论它的编程语言如何。

Answer 1

使用robots.txt文件。

看到这里http://www.robotstxt.org/robotstxt.html

Answer 2

http://www.robotstxt.org/robotstxt.html

Answer 3

你也可以使用你的服务器的robots.txt：

User-agent: * 
Disallow:/

谷歌的爬虫居然尊重这些设置。

Answer 4

有搜索引擎/图书标记服务不使用robots.txt的。如果你真的不希望它变成有史以来我建议使用capcha只是导航到该网站。

Answer 5

真的很容易回答;密码保护它。如果它是一个中转站点，那么它很可能不会公开面对（最有可能是私人听众）。试图让它远离搜索引擎只是在真正的问题是你没有适当地保护它时处理一个症状。

Answer 6

请记住，您不能从隐藏公共无保护的网站从搜索引擎。您可以要求僵尸程序不会对它进行索引（通过我的优秀同事提出的robots.txt），并且编写僵尸程序的人可能会选择不基于此来索引您的网站，但必须至少有一个人那里是谁索引所有的事情，人们要求他不要索引。至少有一个。

如果这是一个很大的要求，保留自动爬虫，某种CAPCHA解决方案可能适合您。

Answer 7

最新最好的推荐方法哟隐藏来自搜索引擎

简单我的分期网站：不让它公开。如果这不起作用，那么只能公开足够长的时间来验证它是否已准备好进行现场发布，然后再将其记录下来。

然而，所有这一切，一个更基本的问题是，“为什么关心？”。如果在推送活动之前，分段站点确实应该是活动站点的一个步骤，那么它是否索引是无关紧要的。