首页 SEO技术正文

Wordpress新手Robots.txt文件规范写法

seo秀 SEO技术 2019-05-25 04:37:01 55 32
今日发现,有好多同学开始玩WordPress了,很高兴有些志同道合的朋友加入WP的大家庭。可是,不管你的水平如何,只要你是站长,就有必要懂的Robots.txt的写法与作用。近日,小站的?p=XX页面老是出现在百度收录中,虽然有增加收录的作用,但是会对网站权重造成影响。所以我采取了一系列的措施来避免过多的重复页面抓取。,其实,我从一开始就做了Robot的优化工作,只不过搬空间时候忘了那个Robots文件了……一失足成千古恨,博客收录降了好多……WordPress的优化还是做得很好的,虽然有些地方需要借助自己对Html等小知识的掌握,但这并不妨碍你把WordPress站点打造成优化典范!,下面我分享一下自己博客的Robots文件,并简单的说一下作用。,

今日发现,有好多同学开始玩WordPress了,很高兴有些志同道合的朋友加入WP的大家庭。可是,不管你的水平如何,只要你是站长,就有必要懂的Robots.txt的写法与作用。近日,小站的?p=XX页面老是出现在百度收录中,虽然有增加收录的作用,但是会对网站权重造成影响。所以我采取了一系列的措施来避免过多的重复页面抓取。

Wordpress新手Robots.txt文件规范写法

其实,我从一开始就做了Robot的优化工作,只不过搬空间时候忘了那个Robots文件了……一失足成千古恨,博客收录降了好多……WordPress的优化还是做得很好的,虽然有些地方需要借助自己对Html等小知识的掌握,但这并不妨碍你把WordPress站点打造成优化典范!

Wordpress新手Robots.txt文件规范写法

下面我分享一下自己博客的Robots文件,并简单的说一下作用。

User-agent: *

Disallow: /comments/feed/

Disallow: /*/trackback

Disallow: /wp-admin/

Disallow: /wp-includes/

Disallow: /wp-content/plugins/

Disallow: /wp-content/themes/

Disallow: /*?replytocom=

Disallow: /*/comment-page-*

Disallow: /?r=*

Disallow: /?p=*

Disallow: /page/

Allow: /wp-content/uploads/

Sitemap: http://***.me/sitemap.xml

Sitemap: http://***.me/sitemap_baidu.xml

上面的User-agent:*意思就是对所有的蜘蛛进行规则,Disallow想必大家英文稍微会一点的都懂。比如Disallow: /page/意思就是不要抓取/page下面的网页,以免造成降权。

晚上见有童鞋将Disallow: /*?replytocom=和Disallow: /*/comment-page-*类似的写成Disallow: *?replytocom=以及Disallow:*/comment-page-*特意说明一下,在百度官方的说明中,Disallow的地址必须以/这个斜杠开头,不加这个虽然可以但是不符合标准。

笔者认为:半懂不懂我们学习不应该有,可有可无这个还是有着比较好!标准在那里,咱们就看标准来吧!希望大家可以多多交流,共同学习!有错误请及时更正指出,谢谢!

在最后祝愿玩WordPress的同学技术步步高,WordPress建站值得你坚持下去,希望看到越来越多的网友有自己的建站一周年纪念文章出现!

版权声明

本文仅代表作者观点,不代表本站立场。
本文系作者授权发表,未经许可,不得转载。

评论

精彩评论
2019-06-09 22:24:32

虽然你单身,但是你胖若两人。

2019-10-07 22:11:08

年龄不是问题,身高不是距离,没钱谁喜欢你?

2019-11-01 06:41:16

我的眼里只有你,因为你的大脸,让我看不到别人。

2019-11-13 13:48:20

让刻苦成为习惯,用汗水浇灌未来,然后脱水而死。

2020-12-16 06:55:14

国庆去哪看风景最好?答案是,朋友圈。

2020-02-05 05:06:28

如果你真的想要做好一件事,全世界都会为你挡路。

2020-07-15 06:39:39

谁说你没有毅力的,单身这件事,你不就坚持了好几十年吗?

2019-09-19 05:50:01

不笑运气差,一笑脸就大!

2019-11-16 09:01:47

你敬人一寸,他将得寸进尺。

2020-01-30 18:36:43

你多努力一点,获得的打击就多一点。

2020-08-12 17:07:40

别人没回复,继续等,你会等到她的朋友圈。

2020-07-10 19:53:53

别人的穷只是表象,你的穷表里如一。

2020-03-02 20:59:16

时间不能冲淡一切,比如痘印。

2019-08-14 07:21:57

听说你过的没我好,那我就放心了。

2019-12-26 09:59:29

都说陪伴是最长情的告白,其实长得好看的是陪伴,长得丑的是纠缠。

2019-07-25 11:51:00

毁灭友情的方式有许多,最彻底的一种是,借钱不还。

2019-10-03 04:27:16

人家谈恋爱,靠长相靠浪漫靠烧钱,而你靠对方眼瞎。

2019-10-18 09:27:25

秀恩爱的最好在中午秀,因为,早晚都会有报应。

2020-07-19 18:38:01

千万不要自己感动自己。大部分人看似的努力,不过是愚蠢导致的。

2020-06-19 04:02:36

你爱不爱你的工作,工作都会在那等你,不离不弃。

2020-07-20 09:23:58

不要以为老天在折磨你,而事实上,老天根本就不在意你。

2019-06-17 01:30:53

我到底是活了16年,还是活了1天,重复了16年?

2020-01-24 15:44:33

也许命运扼住你的咽喉,只是让你少吃两口。