0
有没有可靠防止谷歌爬行/索引/缓存页面的方法？阻止谷歌索引/缓存
我正在考虑创建一个产品，用户可以使用临时URL暂时共享信息。
该信息不是非常机密的，但我肯定不希望它出现在缓存中，甚至搜索结果中。
做这件事最可靠的方法是什么？有什么可能的缺陷？
A
回答
2
制作一个robots.txt文件。有关信息，请参阅http://www.robotstxt.org/。
您还可以在index.html的<HEAD>中使用<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">。
Google的robots.txt处理规格为here。
相关问题
- 1. 阻止谷歌索引的子域
- 2. 阻止谷歌索引我的页面
- 3. 阻止谷歌索引的AngularJS路线
- 4. RewriteRule阻止谷歌索引网站
- 5. 临时阻止谷歌爬虫，它会阻止未来的索引？
- 6. 是否有可能阻止谷歌的部分页面从谷歌索引
- 7. 如何阻止谷歌从缓存magento网站？
- 8. SEOstats API谷歌PageRank谷歌阻止
- 9. 阻止谷歌索引从网站的一些网页
- 10. 阻止谷歌索引我的分页系统
- 11. 如何在索引到谷歌时阻止一个URL？
- 12. 阻止谷歌翻译
- 13. 谷歌索引
- 14. 任何API来搜索谷歌缓存？
- 15. 防止谷歌索引具体内容
- 16. 停止谷歌索引子域名
- 17. 如何停止谷歌索引我的Github存储库
- 18. 谷歌停止索引我的IP和索引
- 19. 阻止表单缓存
- 20. 阻止缓存支持
- 21. 如何阻止FLEX缓存？
- 22. 可以通过谷歌索引的元索引由谷歌爬
- 23. 阻止搜索引擎索引网页
- 24. 阻止谷歌从我们的第二台服务器索引文件
- 25. 如何阻止内容盗链除了从htaccess的规则，谷歌索引
- 26. 如何从索引或以下任何阻止谷歌的目录
- 27. 缓存谷歌地图android？
- 28. Node.js谷歌地图缓存
- 29. 谷歌浏览器缓存
- 30. 加快谷歌缓存
谢谢。我只是想知道如何得到这个文件，并且以我在我的问题中描述的方式工作。你有使用它的经验吗？ –
这是非常标准的，我看到的唯一一个代理忽略它是百度（我通过iptables强行阻止它）。 – Grod