2
A
回答
1
一个好地方,开始寻找正确的语法应为here:
还要注意通配符和正则表达式是无论是在用户代理不支持或禁止线。用户代理字段中的'*'是一个特殊的值,意思是“任何机器人”。具体而言,您不能拥有像
"User-agent: *bot*"
,"Disallow: /tmp/*"
或"Disallow: *.gif"
这样的行。
相关问题
- 1. 禁止在Swift操作系统中运行某些代码行
- 2. 禁止某些字符串
- 3. 如何禁用某些操作的默认URL映射
- 4. 如何禁止某个特定操作的日志记录?
- 5. 如何限制某些行的操作?
- 6. 如何禁止某些情况下的ViewPager分页给某些孩子?
- 7. 403禁止某些YouTube网址
- 8. 暂时禁止访问某些页面
- 9. ASP.NET:禁止某些Active Directory用户
- 10. YouTrack:禁止某些字段的通知
- 11. 禁止某些Windows键盘快捷键
- 12. QTreeView则对某些行禁止选择
- 13. 我想禁止某些前缀
- 14. 如何在某个目录中处理某些操作?
- 15. JPA/EclipseLink:为某些合并操作禁用级联?
- 16. 禁用ListView xamarin android中某些cellView的拖放操作?
- 17. 暂时禁用jQuery中的某些绑定操作
- 18. 如何在espresso框架中禁用某些操作的布局渲染?
- 19. 设计 - 如何禁止某些用户登录?
- 20. 如何在UITextview中禁止某些字符
- 21. 如何验证datepicker禁止/拒绝某些日期?
- 22. 如何在PHP中禁止某些E_WARNING的日志记录?
- 23. 如何禁止在dist-upgrade期间删除某些软件包?
- 24. 如何禁止使用git修改某些文件?
- 25. 如何查找文件中的某些单词然后执行某些操作?
- 26. 某些操作不起作用
- 27. 如何更改标识停止ASP.NET为了执行某些操作
- 28. 如何停止关机并在Windows 10上使用Powershell执行某些操作
- 29. 如何获得此代码以停止某些非数字操作?
- 30. 在做某些操作时停止应用程序
我已经添加了最相关的段落,似乎回答问题的报价。 –
这是根据标准。 Googlebot并不像黑白一样,它允许并理解Disallow:/*.gif$ – randomguy