zblog php robots,怎么写ZBlogPHP网站的robots.txt

我们搭建好一个网站，搜索引擎爬取我们页面的工具叫做搜索引擎机器人，也就是所谓的“蜘蛛”，蜘蛛在爬取网站页面之前，会先去访问网站根目录下面的一个文件，这个文件其实就是给“蜘蛛”的规则，也就是robots.txt，如果没有这个文件，蜘蛛会认为你的网站同意抓取全部网页。

这样就会为日后的运营，埋下隐患，比如：

1，新站无栏目无内容，被收录，影响站点质量评定；

2，产生大量重复页面，动态链接被抓取。

robots.txt文件是一个纯文本文件，如果网站根目录有这个文件，那么就可以告诉蜘蛛哪些页面可以爬取(收录)，哪些页面不能爬取。

例如：建立一个名为robots.txt的文本文件，然后输入内容User-agent: //*星号说明允许所有搜索引擎收录

Disallow: index.php? //表示不允许收录以index.php?前缀的链接，比如index.php?=1

Disallow: /zb_system/ //表示不允许收录根目录下的zb_system目录，包括目录下的文件，比如zb_system/232.html

具体关于robots.txt文件的相关设置，你可以参考百度官方文档，百度搜索资源平台->网站支持->数据监控->robots

那么针对于zblogphp网站的robots.txt该怎么写呢？

首先我们来看zblogPHP的目录结构

zblog网站系统根目录

feed.php : RSS Feed 入口文件

index.php : 前端页面入口文件

search.php : 搜索入口文件

zb_install 文件夹：zblog系统安装文件夹，安装完毕会自动删除，或手动删除

zb_system 文件夹：为 zblog系统框架的主要文件(屏蔽蜘蛛)

zb_users 文件夹：为 zblog为用户文件夹，里面包含了主题文件夹，插件文件夹，以及附件存放文件夹。

zb_users目录

theme ：主题模版文件夹

logs ：目志文件夹,里面文件是记录错误的(屏蔽蜘蛛)

plugin ：插件文件夹

avatar ：用户头像文件夹

cache ：缓存文件夹

c_option.php ：数据库配置文件

emotion ：表情文件夹

upload ：附件存放文件夹

language ：语言包文件夹(屏蔽蜘蛛)

data ：数据文件夹(屏蔽蜘蛛)

根据ZblogPHP的目录结构，zblogphp站点的robots.txt文件，可以写成这样：User-agent: *

Disallow: search.php

Disallow: /zb_system/

Disallow: /zb_users/data/

Disallow: /zb_users/language/

Disallow: /zb_users/logs/

Sitemap:http://www.umtheme.com/sitemap.xml

其中网址www.umtheme.com换成你自己的域名，写好后把文件存放或上传到网站根目录即可，sitemap.xml可以通过插件生成，应用中心有专门的插件。

zblog php robots,怎么写ZBlogPHP网站的robots.txt相关推荐

z-blog php关键字和描述,zblogphp网站添加关键词、描述的方法
ps:现在zblogphp出来了一个seo插件,更方便了解决了此问题,所以请大家直接阅读"zblogphp的seo插件:标题SEO"即可. 可能很多朋友都习惯网站架设好后就去设置网 ...
如何写网站的robots.txt和meta name robots的配置
robots.txt基本介绍robots.txt是一个纯文本文件,在这个文件中网站管理者可以声明该网站中不想被robots访问的部分,或者指定搜索引擎只收录指定的内容. 当一个搜索机器人(有的叫搜索蜘 ...
tensorflow+python flask进行手写识别_python+flask搭建CNN在线识别手写中文网站！简直太屌了！...
原标题:python+flask搭建CNN在线识别手写中文网站!简直太屌了! 使用python+flask搭建的一个网站,然后从网页的写字板上获取鼠标手写的汉字经过转码后传回后台,并经过图片裁剪处理之 ...
HTML+CSS 仿写京东网站界面
在学习了HTML和CSS以后,用俩天的时间仿写京东网站的部分界面,基本将之前学习的内容都应用到了,收货颇多,也对网站的布局有了更深的认识. 总结整体的布局在开始写网站之前,要考虑整体的布局,事先将 ...
将自己写的网站发布到外网sunny-ngrok
一般自己写完一个网站之后配置到tomcat之后就能通过局域网访问了,但是却无法让不是同一个局域网的计算机访问,要想做到外网访问, 1.可以将网站配置到云服务器上,或者你得有自己的外网ip, 2.利用内 ...
如何写企业网站设计方案？
CSDN _ FAQ列表 _ ASP _ 其它 Q : 如何写企业网站设计方案? 主要解答者: tigerwen01 提交人: tigerwen01 感谢: chinaworke ...
装逼+写代码网站--KuaiLe推荐
** 装逼+写代码网站 ** 1 链接http://fediafedia.com/neo/aperture/index.html 2 链接http://geektyper.com/
zblog php版调用代码,zblogphp调用指定单篇文章代码升级版
前天写了一篇"zblogphp调用指定id文章的方法",结果今天悲剧了,事情是这样的. 客户的需求是:网站某一个区块可以调用指定文章,可以在后台随意修改调用文章的id,并且调用文章 ...
网站api自己怎么写_网站描述怎么写？对网站优化有什么作用？
随着互联网的发展越来越快,网站的竞争也越来越激烈,如何在多样化的网络环境中将自己的网站脱颖而出,单靠网页标题是不够吸引的,还需要有夺人眼球的网站网页描述.网站描述就是网站的基础标签TDK中的D,也就是 ...
自己帮别人写的网站可以公开源码吗_雷军靠写代码赚第一个 100 万，马化腾亲自写腾讯网，码农出身的大佬...
作者 | 夏弢本文经授权转载自创业邦(ID:ichuangyebang) 一提到程序员,很多人脑海里马上会出现这些刻板标签: 可事实上,有一个词似乎更能概括: 改变世界程序改变世界,已经有几十年了 ...

zblog php robots,怎么写ZBlogPHP网站的robots.txt

zblog php robots,怎么写ZBlogPHP网站的robots.txt相关推荐

最新文章

热门文章