ZBlogPHP站点的robots.txt文件应该怎么写?

robots.txt 文件有什么用这里就不多说的,想要了解的可以参考『利用 Robots.txt 优化你的 WordPress 站点』这篇文章,该文介绍了 Robots 协议定义和作用及 WordPress 站点如何编写 robots.txt 文件。WordPress 站点和 ZBlogPHP 站点的 robots.txt 文件内容肯定是不一样的,那么我们 ZBlogPHP 站点应该如何写 robots.txt 文件呢?

ZBlogPHP站点的robots.txt文件应该怎么写?

老实说,对于 ZBlogPHP 的 robots.txt 文件 boke112 导航也不在行,所以在写 robots.txt 文件之前先看看那些使用 ZBlogPHP 的大神如何写,然后再结合自己站点的实际情况来写即可。分析了卢松松博客和月光博客的 robots.txt 文件,总结如下:

  • 相同点:都禁止搜索引擎抓取/zb_system/,同时填写有地图文件(ZBlogPHP 站点地图生成可参考『ZBlogPHP 站点如何生成地图文件?』)路径;
  • 不同点:卢松松博客还禁止搜索引擎抓取插件目录/plugin/

根据这两位大神的站点 robots.txt 文件,我们 ZBlogPHP 站点的 robots.txt 文件可以写成这样:

  1. User-Agent: *
  2. Disallow: /zb_system/
  3. Sitemap: http://你的站点域名/sitemap.xml

如果想禁止抓取插件目录,可以写成:

  1. User-Agent: *
  2. Disallow: /plugin/
  3. Disallow: /zb_system/
  4. Sitemap: http://你的站点域名/sitemap.xml

一般/zb_users/含有一些图片、CSS 文件之类的,所以 boke112 导航不建议禁止抓取这个文件夹。大部分 ZBlogPHP 站点的 robots.txt 文件参考上面两种写法就可以的,如果具体还想要禁止抓取那些文件或文件夹,大家可根据自己的实际情况添加。

© 版权声明
THE END
喜欢就支持一下吧
赞赏