如何检查网站是否可以搜索机器人

Question

是否有任何测试可以运行，以查看搜索漫游器是否可以访问我的网站？

Answer 1

1. 规格：http://www.robotstxt.org/

2. 语法检查：http://www.searchenginepromotionhelp.com/m/robots-text-tester/robots-checker.php

3. 访问性检查：http://phpweby.com/services/robots

_{所有这些都是谷歌的朋友，所以它似乎}