谷歌搜索引擎中缺少的网站片段

Question

首先，我在seo中很新。目前，我正在开发一个网站。我的问题是关于缺少的网站片段。

当我尝试使用谷歌的搜索引擎它给出这样的结果搜索网站：

www.xxxxxxxx.com.ph/ 此结果的描述是因为这个网站的机器人不可用.txt - 了解更多信息。

，但在我的标题标签上的每个网页，我有这样的代码：

<title> PH SAMPLE XXXXX | Official site</title> 
    <link rel="shortcut icon" href="_img/favicon.ico" type="image/x-icon" /> 
    <meta name="description" content="Each Antica Murrina jewellery is the result of a combination of traditional craftsmanship and style-conscious minded fashion and trends." /> 
    <meta name="keywords" content="Antica Murrina, Glam Glass 2012, Fashion Glass Jewellery, accessory, Venezia, handmade, design" /> 

我是怎么错过了见面的确切格式作为我的头标记？ 请帮忙！提前致谢！

Answer 1

首先，页面头部的元标记没有任何问题。

问题出在服务器上，您应该找到一个名为robots.txt的文件，告诉Google的抓取工具不抓取您的网站。这会对您的网站的搜索引擎优化产生负面影响，因为Google可能甚至不会在您的网站中存在其他网页。

您可以删除服务器上的文件，或只是删除阻止Google抓取您的网站的条目。

如果你想让你的网站被所有的搜索引擎索引来增加SEO，只需将文件完全删除即可。

编辑：这里是一个链接，如果你想正如您在您的意见已经提到@ J2D8T你没有在您的网站robots.txt文件，以了解更多关于robots.txt https://support.google.com/webmasters/answer/156449?hl=en

Answer 2

。导航到

http://anticamurrina.com.ph/robots.txt

我们可以确认是这种情况，因此应该没有理由你recieving此消息。它似乎没有使用任何CMS，因此应该没有阻止。根据这篇文章

http://www.seroundtable.com/google-robots-snippet-15576.html

有几个人简单地创建一个robots.txt因为有时候缺少的一个可能会导致的问题取得了成功（不过这可能是WordPress的具体）。我建议你手动创建一个robots.txt文件。

只需创建robots.txt文件，里面放上以下（这使获得的一切）

User-agent: * 
Disallow: 

然后，你将需要把这个上传到你的网站的根（同一个地方tyhe指数）上成功，你应该能够浏览到

http://anticamurrina.com.ph/robots.txt

和见本文件。

我用Lynx文本浏览器测试了该网站，该网站正如预期般出现。

http://www.vordweb.co.uk/standards/download_lynx.htm

创建robots.txt文件后，我会建议，简单地等待几天，然后再次检查谷歌，看看是否说明正在正常提取。