成都seo博客

蔡江博客

不同网站程序的Robots文件写法,你值得拥有!

作者:choi 日期:2019-04-13 10:57 浏览:

  robots.txt是搜索引擎蜘蛛访问我们网站时第一个要看的文件。这个文件是告诉蜘蛛在爬取我们网站时,哪些文件可以看,哪些文件不能看。如果我们网站上有些信息不想被搜索引擎蜘蛛爬取,这个时候我们就可以写一个robots.txt文件,告诉蜘蛛不要索引我们这个文件。

  看完上面这段话,相信大家也可以知道robots.txt文件是干什么用的。但是我们当下有很多热门的建站程序,例如:wordpress、dedecms、phpcms、discuz等等,那么这些建站程序的robots.txt文件的写法都是一样的吗?答案肯定不是。今天我就给大家分享下这些热门建站程序的robots.txt文件该怎么写。

  1.WordPress建站程序的robots.txt文件写法

  User-agent: *

  Disallow: /wp-admin

  Disallow: /wp-content/plugins

  Disallow: /wp-content/themes

  Disallow: /wp-includes

  Disallow: /?s=

  Sitemap: http://www.***.com/sitemap.xml

  2.DedeCMS建站程序的robots.txt文件写法

  User-agent: *

  Disallow: /plus/feedback_js.php

  Disallow: /plus/feedback.php

  Disallow: /plus/mytag_js.php

  Disallow: /plus/rss.php

  Disallow: /plus/search.php

  Disallow: /plus/recommend.php

  Disallow: /plus/stow.php

  Disallow: /plus/count.php

  Disallow: /include

  Disallow: /templets

  Disallow: /member

  3.phpcms建站程序的robots.txt文件写法

  User-agent: *

  Disallow: /admin

  Disallow: /data

  Disallow: /templates

  Disallow: /include

  Disallow: /languages

  Disallow: /api

  Disallow: /fckeditor

  Disallow: /install

  Disallow: /count.php

  Disallow: /comment

  Disallow: /guestbook

  Disallow: /announce

  Disallow: /member

  Disallow: /message

  Disallow: /spider

  Disallow: /yp

  Disallow: /vote

  Disallow: /video

  4.discuz论坛建站程序的robots.txt文件写法

  User-agent: *

  Allow: /redirect.php

  Allow: /viewthread.php

  Allow: /forumdisplay.php

  Disallow: /?

  Disallow: /*.php

  总结:以上就是当下4个热门建站程序的robots.txt文件写法。当然我这里并不是要大家在实际操作过程中也按照这个方法来写,因为这里都是我用经验总结出来的,其中有些协议大家可能都涉及不到,所以希望大家灵活的使用,不要太死板。


文章来源:未知
文章标题:不同网站程序的Robots文件写法,你值得拥有!
本文地址:http://www.chengduseo.cn/seo/8706.html
相关文章
做好网站推广的几个关键要点 做好网站推广的几个关键要点

现在做网络营销可以给企业带来巨大的经济效益,同时也有助于企业品牌知名度的提升。随着从事SEO推广的企业变得越来越多

成都seo推广懂得优化细节,网站排名如探囊取物 成都seo推广懂得优化细节,网站排名如探囊取物

要想网站能够在搜索引擎中获得好排名?想要让自己网站的排名可以处在搜索引擎中比较优秀的位置,排在同行网站的前面,

「成都网站建设」改版如何保证网页数据完整? 「成都网站建设」改版如何保证网页数据完整?

网站SEO期间,就些站长就会有这样的疑问,网站改版后导致的降权问题是否可以避免?其实这是无法避免的,但是可以有效的

网站要想获得好排名,收录量及速度是关键 网站要想获得好排名,收录量及速度是关键

通过网站的收录速度,可以判断出网站的整体质量的一个参考指标,网站的收录速度快,收录量度多,说明网站就更加受搜索

哪种内容质量才对网站优化有帮助? 哪种内容质量才对网站优化有帮助?

如今,很多站长都清楚,网站的内容质量度是影响网站优化效果的基础因素,如果你的文章内容不具有吸引力,难以满足用户

成都SEO告诉你怎样做让你的网站促进收录 成都SEO告诉你怎样做让你的网站促进收录

我们在给网站做优化的时候,有时候会遇到某一个栏目页,一直不被搜索引擎收录,我们应该怎么去进行一些操作,促进网站

网站跳出率高是网站建设的问题还是seo优化的问题 网站跳出率高是网站建设的问题还是seo优化的问题

在做网站优化的时候,很多因素都会导致网站的体验变差,跳出率不断地提升,而跳出率过高对网站的排名和权重也有较大的

要怎样提升用户对我们网站的粘度? 要怎样提升用户对我们网站的粘度?

网站价值的体现是离不开优化的,同时是更加离不开用户群体的,因此在做网站优化的时候还要注意提升网站的用户粘度,这

成都网络优化要怎样合理的布局关键词 成都网络优化要怎样合理的布局关键词

一个网站可以有几个关键词,也可以有成百上千个关键词,对网站关键词的布局是会对网站优化造成一定影响的,而对网站关

对新站做SEO优化,为何会出现降权的问题? 对新站做SEO优化,为何会出现降权的问题?

现在很多企业在做网站优化的时候,就是带着盈利性的目的来的,因此对网站SEO优化的知识了解并不充足,所以在整个过程中

  • 精彩推荐
  • 最近发布
分享到:
Copyright © 2016-2021 「蔡江博客」版权所有
蜀ICP备15028159号  
网站地图 | 技术支持:点瑞网络