1
A
回答
2
这不是.htaccess解决方案。
为了避免特定页面上的所有搜索机器人，在你的HTML的<head>中添加该<META>标签：
<meta name="robots" content="NOINDEX, NOFOLLOW">
0
的万无一失的方法，以确保它们没有上市是密码保护与htaccess的目录和htpasswd。
http://weavervsworld.com/docs/other/passprotect.html
然而，在各大搜索引擎会尊重您的robots.txt文件并允许禁止不索引页。
相关问题
- 1. 我希望搜索引擎抓取我的网页而不是dt_benefits
- 2. 停止部分页面被搜索引擎索引？
- 3. 如何防止搜索引擎只索引我的页面的一部分
- 4. 我想知道我的网站在谷歌搜索引擎上的具体页面的索引
- 5. 我的天蓝色网站不显示在搜索引擎上
- 6. 搜索在我的网站的网页
- 7. 创建内部网站搜索引擎
- 8. 为什么搜索引擎不能抓取我的网站？
- 9. ASP.NET网站搜索引擎
- 10. 网站搜索引擎
- 11. 网站搜索引擎
- 12. 网站搜索引擎
- 13. Opencart作为搜索引擎优化网页的搜索页面
- 14. 我的网站搜索框在页面内搜索
- 15. 我的网站如何在搜索引擎中出现
- 16. 实现搜索静态页面的站点搜索引擎
- 17. 搜索引擎索引Flash网站？
- 18. 搜索引擎拖网安全页面
- 19. 规范我的搜索引擎优化的网页网址
- 20. 提高我的网站的搜索引擎优化
- 21. 从搜索引擎中删除我的网站的AMP结果？
- 22. 我的网站搜索引擎的数据库表格结构
- 23. 为什么googlebot使用我的网站的搜索引擎？
- 24. 为我的网站制作高效的搜索引擎
- 25. jQuery搜索引擎/页面
- 26. 分页和搜索引擎
- 27. 搜索引擎和分页
- 28. 如何使搜索引擎在我的网站上抓取数万页
- 29. 阻止搜索引擎索引网页
- 30. 如何在我的搜索引擎中插入分页？
您可以排除某些搜索引擎通过使用robots.txt文件：http://www.robotstxt.org/。尽管如此，这只会对遵循规则的引擎有所帮助。 – andrewsi