robots.txt

无需 FTP 就能给爬虫下指令。

robots.txt 告诉爬虫哪些地方该看、哪些不该看。它的内容直接在后台管理里写，不用碰服务器上的文件。指向 Sitemap 的引用会自动附加上去。

终身方案包含全部九个插件 —— 今后的插件也在内。

内容直接在后台管理中编辑 · 无需访问文件系统

已启用设置

robots.txt 提供以下功能

内容直接在后台管理中编辑

无需访问文件系统

Sitemap 引用自动写入

保存后即刻生效

在后台管理中填写规则

保存

打开 /robots.txt 查看

已有的 robots.txt 文件怎么办？

根目录下真实存在的文件优先 — 服务器会在轮到 WordPress 之前直接把它发出去。想使用后台管理里的内容，就要把该文件删掉。

Sitemap 的引用需要自己写吗？

不用，它会自动附加。你只需要管好自己的规则。

可以用它把页面从搜索中移除吗？

封锁能阻止爬虫抓取。但 robots.txt 并不能保证某个地址不会再出现在任何索引里。

九个插件一次性 149 €，而不是每月 13 €。通过 Stripe 安全支付。前 14 天：问题解决，否则退款。