织梦、discuz、WordPress等主流程序的robots写法

分类:新闻资讯 作者:原创文章代写 发布:2015-04-13
要知道robots文件的写法,我们首先要知道robots文件的目的,这个文件的主要目的就是引导搜索引擎,让他按照我们的要求是收录某些页面,不收录某些页面,这样做的目的前面已经说过,不再重复。

其次就是给出网站地图地址,让搜索引擎去爬取地图,快速收录页面。

因为默认搜索引擎是可以抓取所有的文件的,所以通常我们写robots文件就告诉搜索引擎不去抓取哪些文件,这里主要给出比较有代表性的几个程序的robots文件,各位可以按照自己的程序情况进行修改。

现在主流的程序都有相应的百度结构化插件,所以个人以为在robots文件里写入网站地图意义已经不是太大了,本文就不讲这方面的内容了。

织梦CMS程序

User-agent: *   //这里*指本协议针对所有搜索引擎,实际使用时删除本文本。

Disallow: /include   // Disallow是不允许,不允许收录include文件夹下的所有文件

Disallow: /member

Disallow: /plus

Disallow: /templets

Disallow: /data

Disallow: /uploads

Disallow: /images

Disallow: /404.html

Allow: /plus/search.php  // Allow是允许

Disallow: /include

Disallow: /js

Disallow: /s*t8/

*代表任意字符,后台地址建议以上面的形式填写,否则就暴露后台地址了。

这是织梦cms系统程序,这些都应该写进robots去,如果你还有其他文件需要屏蔽蜘蛛,请自行添加。

discuz论坛程序

discuz程序的robots写法可以参考他们的官方论坛http://www.discuz.net/robots.txt

#

# robots.txt for Discuz! X3.2

#

User-agent: *

Disallow: /api/

Disallow: /data/

Disallow: /source/

Disallow: /install/

Disallow: /template/

Disallow: /config/

Disallow: /uc_client/

Disallow: /uc_server/

Disallow: /static/

Disallow: /admin.php

Disallow: /search.php

Disallow: /member.php

Disallow: /api.php

Disallow: /misc.php

Disallow: /connect.php

Disallow: /forum.php?mod=redirect*

Disallow: /forum.php?mod=post*

Disallow: /home.php?mod=spacecp*

Disallow: /userapp.php?mod=app&*

Disallow: /*?mod=misc*

Disallow: /*?mod=attachment*

Disallow: /*mobile=yes*

WordPress博客程序

WordPress程序robots写法可以参考本站:http://www.ftdx.net/robots.txt

User-agent:*
Disallow:/*/wp-admin/
Disallow:/*/wp-includes/
Disallow:/*/wp-content/plugins/
Disallow:/*/wp-content/themes/
Disallow:/*/feed/
Disallow:/*/tag/
Disallow:/*/page/
Disallow:/*/author/
因为本站还有一个二级目录的WordPress博客,所有每一个目录前面加了*,表示任意目录的这个文件夹都不准收录。

以上即是织梦、discuz和WordPress的robots文件代码,老规矩,懒人直接点这里下载。

作者: 飞天原创文章代写
版权所有。转载时必须以链接形式注明作者和原始出处及本声明。
-

关于我们

飞天代写网是国内老牌的原创文章代写团队 – 专业写原创。因为专注,所以专业。

团队拥有具备专业网站优化的工作人员,二十多名专业写手均具备良好的文学素养和较高的写作能力,技术与能力的结合定能为您输出源源不断的高质量SEO原创文章。

飞天代写网致力于解决目前中国大多企业网站花费巨资建设和优化但却没人管理的难题,想让网站活跃起来,必须要定期的进行文章加入且必须是原创。

通过更新高质量原创文章,可以做到增加网站收录、提升网站权重、提高网站在百度等搜索引擎上的排名与恢复被K或降权的网站。

点我进行咨询吧

我们一直为大家提供日臻完善的服务和高质量原创文章,新老客户都知道。

致还在犹豫的您:

您是否为网站里的原创文章内容发愁?

每天忙碌之后还要抽空去写原创文章?

或者您根本没有写作这方面的天赋?

那么您是否需要一名全职的网站编辑呢?

如果还有比这个更简单,更轻松的方式您可不能错过!

那就是选择飞天代写网!

我们来帮您解决这一切烦恼!

做您最贴心,最专业的原创文章编辑。
您的时间,应该用在做更有价值的事情上。

-
飞天原创文章代写网包月代更新服务 飞天原创文章代写网
客服QQ:2123456577,点我进行咨询吧 网站地图 原创代写 作文、微信文章代写代更新 关键词描述代写 影评自媒体文章代写代更新
Copyright © 2012-2014 Inc. 辽ICP备10017769号-最后更新:2023年08月08日 9:34:05今日头条文章代写 淘宝达人/头条文章代写 京东头条文章代写

飞天SEO原创文章代写网是国内老牌、专业的原创代写文章网站,提供各行各业原创软文代写服务,100%高质量原创网站文章代写轻松助您关键词排名上升,网站权重提高,实现共赢!

代写文章