1
我想禁止SE僵尸中的所有文件和文件夹,除了特殊的文件夹和文件。 我可以在robots.txt文件中使用这些行吗?允许和禁止在robots.txt文件中
User-agent: *
Disallow:/
Allow: /thatfolder
是不是?
我想禁止SE僵尸中的所有文件和文件夹,除了特殊的文件夹和文件。 我可以在robots.txt文件中使用这些行吗?允许和禁止在robots.txt文件中
User-agent: *
Disallow:/
Allow: /thatfolder
是不是?
User-agent:*
Allow: /thatfolder
Disallow:/
这应该做。 (只是改变了顺序)