谷歌网站管理员工具可以看到它，但我找不到它。你知道它是如何生成的，或者它的文件结构在哪里吗？我在我的根目录中看不到该文件。我的网站位于http://mikewills.me 还有机器人。txt文件URL为http://mikewills.me/robots.txt.
最后，谷歌没有为我的网站编制索引，我正试图找出如何编辑机器人。txt，以便允许索引。我已经更改了隐私选项以允许索引，但这并没有更新机器人。txt。
用于WordPress多站点安装的robots.txt存储在哪里？
2 个回复
最合适的回答,由SO网友:Annika Backstrom 整理而成
它是由函数动态生成的do_robots(), 既有动作(do_robotstxt) 和一个过滤器(robots_txt). 如果您创建robots.txt 在你的WordPress根目录中，当/robots.txt 请求，否则处理将依靠WordPress。
当前文件如下所示：
User-agent: *
Disallow:
Sitemap: http://mikewills.me/sitemaps/mikewills-me.xml.gz
SO网友:user1167
机器人。txt是动态创建的。没有机器人。txt文件。安装机器人。txt插件将解决您的问题。希望这有帮助
结束