Robots.txt 文件应放在哪里？

Robots.txt 文件必须放在网站的根目录。

放在子目录的 Robots.txt 文件搜索引擎不能爬取到，所以不会起任何作用。

比如：

http://www.seowhy.com/robots.txt??? 有效

https://www.seowhy.com/"https://www.seowhy.com/a/61.html">使用标签阻止网页被收录。

阅读本文的人还阅读

robots.txt文件有什么必要？

robots.txt