zblog系统博客的robots.txt文件的写法教程

2021-12-23 744阅读 0评论

文章最后更新时间:2022年01月01日已超过18天没有更新。

robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单,但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容,或者是禁止搜索引擎蜘蛛抓取网站的部分或全部内容。这篇文章就讲解一下,zblog博客程序中如何设置robots.txt文件

zblog 目录文件

写robots.txt规则之前,要先了解zblog 所包含的文件,文件夹以及它们的作用是什么。以下图片所展示的内容,为全新的zblog博客安装包,所包含的文件夹以及文件。

zblog系统博客的robots.txt文件的写法教程,zblog系统博客的robots.txt文件的写法教程 zblog 博客系统 文件夹 文件 蜘蛛 robots 搜索 第1张,zblog,博客系统,文件夹,文件,蜘蛛,robots,博客搭建,zblog模板,私人博客搭建,个人博客搭建,hexo博客搭建,github博客搭建,博客搭建教程,,博客搭建,zblog,博客系统,文件夹,文件,蜘蛛,robots,博客搭建,zblog模板,私人博客搭建,个人博客搭建,hexo博客搭建,github博客搭建 博客搭建教程,博客搭建wordpress,博客搭建平台,博客搭建源码,博客搭建记录,博客搭建spring,博客搭建脚本,博客搭建 三端 java个人博客搭建 博客搭建好了接下来什么弄 github个人博客搭建,博客搭建免费,第1张

feed.php : RSS Feed 入口文件

index.php : 前端页面入口文件

search.php : 搜索入口文件

zb_install 文件夹:zblog 初始化安装文件夹,安装完毕会自动删除,或手动删除

zb_system 文件夹:为 zblog 框架的主要文件,需要屏蔽搜索蜘蛛去它以及它所包含的内容抓取

zb_users 文件夹:为 zblog 为用户文件夹,里面包含了主题文件夹,插件文件夹,以及附件存放文件夹。

zblog系统博客的robots.txt文件的写法教程,zblog系统博客的robots.txt文件的写法教程 zblog 博客系统 文件夹 文件 蜘蛛 robots 搜索 第2张,zblog,博客系统,文件夹,文件,蜘蛛,robots,博客搭建,zblog模板,私人博客搭建,个人博客搭建,hexo博客搭建,github博客搭建,博客搭建教程,,博客搭建,zblog,博客系统,文件夹,文件,蜘蛛,robots,博客搭建,zblog模板,私人博客搭建,个人博客搭建,hexo博客搭建,github博客搭建 博客搭建教程,博客搭建wordpress,博客搭建平台,博客搭建源码,博客搭建记录,博客搭建spring,博客搭建脚本,博客搭建 三端 java个人博客搭建 博客搭建好了接下来什么弄 github个人博客搭建,博客搭建免费,第2张

avatar :用户头像文件夹

cache :缓存文件夹

data :数据文件夹(屏蔽蜘蛛)

emotion :表情文件夹

language :语言包文件夹(屏蔽蜘蛛)

logs :目志文件夹,里面文件是记录错误的(屏蔽蜘蛛)

plugin :插件文件夹

theme :主题文件夹

upload :附件文件夹(图片或其它类型文件)

zblog博客的robots.txt文件的写法

以下输入规则,仅供参考

User-agent: *
Disallow: /zb_system/
Disallow: search.php
Disallow: /zb_users/data/
Disallow: /zb_users/language/
Disallow: /zb_users/logs/
Sitemap:https://www.wenytao.com/sitemap.xml

注意:sitemap.xml 为网站的地图文件,可以在zblog应用中心搜索相关的插件。

robots.txt安装与效验

robots.txt 文件应该放在网站根目录下,并且该文件是可以通过互联网进行访问的,否则是没有什么作用的。

安装方法

1、本地新建‘文本文档’并命名为 'robots.txt' 把上面的内容复制,保存即可

2、把 'robots.txt'文件上传到服务器的网站根目录即可

rotots.txt文件效验

可以通过百度搜索资源平台进行效验,

zblog系统博客的robots.txt文件的写法教程,zblog系统博客的robots.txt文件的写法教程 zblog 博客系统 文件夹 文件 蜘蛛 robots 搜索 第3张,zblog,博客系统,文件夹,文件,蜘蛛,robots,博客搭建,zblog模板,私人博客搭建,个人博客搭建,hexo博客搭建,github博客搭建,博客搭建教程,,博客搭建,zblog,博客系统,文件夹,文件,蜘蛛,robots,博客搭建,zblog模板,私人博客搭建,个人博客搭建,hexo博客搭建,github博客搭建 博客搭建教程,博客搭建wordpress,博客搭建平台,博客搭建源码,博客搭建记录,博客搭建spring,博客搭建脚本,博客搭建 三端 java个人博客搭建 博客搭建好了接下来什么弄 github个人博客搭建,博客搭建免费,第3张

网址:https://ziyuan.baidu.com



版权声明
  本站致力于为模板爱好者提供国内外插件开发技术和模板共享,着力为用户提供优资资源。
  本站提供的所有下载文件均为网络共享资源,请于下载后的24小时内删除。如需体验更多乐趣,还请支持正版。
  我站提供用户下载的所有内容均转自互联网。如有内容侵犯您的版权或其他利益的,请编辑邮件并加以说明发送到站长邮箱。
  站长会进行审查之后,情况属实的会在三个工作日内为您删除。
文章版权声明:除非注明,否则均为IT屋博客原创文章,转载或复制请以超链接形式并注明出处。
您需要 登录账户 后才能发表评论

发表评论

表情:
评论列表 (暂无评论,744人围观)

还没有评论,来说两句吧...

取消
微信二维码
微信二维码
支付宝二维码