zblog系统博客的robots.txt文件的写法教程
robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单,但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容,或者是禁止搜索引擎蜘蛛抓取网站的部分或全部内容。这篇文章就讲解一下,zblog博客程序中如何设置robots.txt文件
zblog 目录文件
写robots.txt规则之前,要先了解zblog 所包含的文件,文件夹以及它们的作用是什么。以下图片所展示的内容,为全新的zblog博客安装包,所包含的文件夹以及文件。
feed.php : RSS Feed 入口文件
index.php : 前端页面入口文件
search.php : 搜索入口文件
zb_install 文件夹:zblog 初始化安装文件夹,安装完毕会自动删除,或手动删除
zb_system 文件夹:为 zblog 框架的主要文件,需要屏蔽搜索蜘蛛去它以及它所包含的内容抓取
zb_users 文件夹:为 zblog 为用户文件夹,里面包含了主题文件夹,插件文件夹,以及附件存放文件夹。
avatar :用户头像文件夹
cache :缓存文件夹
data :数据文件夹(屏蔽蜘蛛)
emotion :表情文件夹
language :语言包文件夹(屏蔽蜘蛛)
logs :目志文件夹,里面文件是记录错误的(屏蔽蜘蛛)
plugin :插件文件夹
theme :主题文件夹
upload :附件文件夹(图片或其它类型文件)
zblog博客的robots.txt文件的写法
以下输入规则,仅供参考
User-agent: *
Disallow: /zb_system/
Disallow: search.php
Disallow: /zb_users/data/
Disallow: /zb_users/language/
Disallow: /zb_users/logs/
Sitemap:https://blog.wenwuhulian.com/sitemap.xml
注意:sitemap.xml 为网站的地图文件,可以在zblog应用中心搜索相关的插件。
robots.txt安装与效验
robots.txt 文件应该放在网站根目录下,并且该文件是可以通过互联网进行访问的,否则是没有什么作用的。
安装方法
1、本地新建‘文本文档’并命名为 'robots.txt' 把上面的内容复制,保存即可
2、把 'robots.txt'文件上传到服务器的网站根目录即可
rotots.txt文件效验
可以通过百度搜索资源平台进行效验,
相关文章
- WIin10——QTP10.0运行mgn-mqt82未能生成lservrc文件
- 在VMD上可视化hdf5格式的分子轨迹文件
- Linux chown命令:更改所有者,将每个给定文件的用户和/或组所有权更改为新的所有者
- java实现http协议_java用http协议本地文件
- 为实现跨境文件高速传输,镭速传输都用了哪些技术
- java获取src下包的文件的路径详解编程语言
- Linux查看所有文件的方法(linux显示全部文件)
- 使用Linux Tar工具删除文件(linuxtar删除)
- 探索Linux操作系统的源代码(linux源代码文件)
- Linux文件备份:实现稳定、可靠的数据保障(linux文件备份方案)
- Linux文件自动同步:一步到位(linux文件自动同步)
- Linux解压TGZ文件的快速攻略(linux解压tgz)
- Linux文件剪切:快捷高效的文件处理方式(linux文件剪切)
- 深入浅出解析Redis日志文件(解析redis日志文件)
- 解剖Oracle体系架构三大文件驱动未来(oracle体系三大文件)
- ASP.NET中上传并读取Excel文件数据示例