今天有空看了一下自己博客收录的链接,我开始慌了

临近放假,基本上没有什么课了,接下来主要是对考试内容的复习

咱们专业也是戴上了考试课最多的帽子,结课考试要考七门

排的是三天考试时间,时间的话,还好,反正比高中考试轻松很多

下午复习本学期seo课程的时候,心血来潮乘着下午不忙的时候要不要给自己的博客优化一下

立刻打开百度site了一下我的博客域名

一个月前看还是单纯的一个首页,惊喜的发现自己链接已经被收录了30条

惊喜的同时也给我带来了惊吓,自己的一篇文章被百度搜索引擎重复收录了二十多篇,这.......

69539-i5x6ikt0m7t.png

67212-0lsjunim57ce.png

45966-heisviuud69.png

仔细分析发现这些被重复收录的链接基本上都是 ?replyTo= 这样的参数页,每个评论参数都被搜索引擎误认为一个新的页面

导致了百度蜘蛛的重复抓取和重复收录,还记得上课SEO老师讲过,搜索引擎重复收录一个页面链接

等百度引擎排查会认为你是批量做收录,会被拉入收录黑名单,汗,我这个不就正是这样吗,焯!

再仔细排查其他收录的链接,也有几篇收录的rss订阅链接,访客点进去,一堆看不懂的xml的代码

访客看见这些页面肯定会一下跳出去,这样只会增加自己的文章跳出率和网站的跳出率,不利于流量的留存

文章跳出率较高百度蜘蛛会认为你的文章质量不高,也会降低收录速度

解决方法其实很简单,在网站根目录放置一个 robots.txt 文件告诉各大搜索引擎蜘蛛那些目录可以爬,那些目录不可以爬

当然还是自己做博客之前的疏忽,才导致这样的结果,亡羊补牢,为时不晚,写了个 robots.txt 放入网站根目录

User-agent: *

Disallow:

Disallow: /feed

Disallow: /?replyTo=

Disallow: /admin

这里我主要是对后台地址和订阅地址,评论参数进行禁止访问

这样等待下次搜索引擎抓取更新,这些被重复收录的链接,就会被清理掉

如果担心自己的规则写错,也可以在百度资源平台的站点管理测试一下

28381-e0x3y1nybu9.png

24044-jspgtajhno.png

47008-7ycb9p20629.png

这样,测试之后,自己写的规则就生效了

当然不在意收录的博友可以忽略这些步骤

我的博客即将同步至腾讯云+社区,邀请大家一同入驻:https://cloud.tencent.com/developer/support-plan?invite_code=u6wnjiw8l3gr

感谢来访

avatar小赵同学
333
22
3
发表留言

    3个月前

    我之前也是,总共才个位数的收录,却还包括了几个回复页,设置robots之后就好了,就感觉百度反应有点迟钝,设置好几天之后才生效。

      小赵同学博主
      3个月前

      个人生活博客 收录无所谓啦

    7个月前

    你用百度搜一下所有pw域名的收录量,也就只有几条。听说是前期pw域名垃圾站过多,整个被百度ban 了,哎,不思进取的搜索引擎……

      小赵同学博主
      7个月前

      是啊 玩玩还行 但是怎么说呢 做站不合适 如果不在意收录没事 我自己手里还有两个三字母,不知道到期丢还是出掉,aug.pw即八月 Aug

    7个月前

    找到相关结果数约3,980个,也就130多篇文章

      小赵同学博主
      7个月前

      子比的seo优化的非常不错呢,老哥网站内容做的也不错

    7个月前

    我就是那个不在意收录的博友

      6个月前

      不好意思 我也是

    7个月前

    了解一些基本的SEO还是有必要的,博客类的也不用那么在乎。

      小赵同学博主
      7个月前

      个人博客主要是博友之间互访带来的流量,才会有价值

    7个月前

    有收录就不错了,我的收了个首页,几天又没了

      小赵同学博主
      7个月前

      定期保持更新就好了,其实如果个人生活博客的话,搜索引擎带来的流量其实用处不大,好好做内容就好啦

    7个月前

    我博客很早之前也是没收录,然后百度找了一个robots.txt文件放了进去,现在收录还行,百度显示有80条,也可能是站点时间比较长,不知不觉都快2年了。

      小赵同学博主
      7个月前

      是啊,域名时间越长,越容易被百度搜素引擎信任,这个毋庸置疑,还是自己的疏忽,导致自己收录了很多rss链接,搞的引擎这几个月都没收录我的博客了,怀疑是不是进黑名单了

    7个月前

    你这么一说,我也site了一下,我竟然也有收录,虽然没卵用

      小赵同学博主
      7个月前

      老哥的handsome主题seo优化的非常不错,还有com域名在百度搜素友情给的权重也是相当高,百度收录的话,也确实可以带来流量,但是基本上都是找教程的,跳出率比较高,感觉是没什么价值的流量

    7个月前

    usj.cc 目前还是30条哇,40篇文章为什么不收录,而是收录评论?

      小赵同学博主
      7个月前

      之前自己的疏忽没有做robots.txt文件,导致自己的很多rss订阅链接和评论被收录了,每一个评论都有一个自己的id,搜索引擎可能认为那是一篇新文章,所以对这一篇文章频繁收录,搜索引擎可能误认为我在采集,最近一段时间几乎没收录过了

    7个月前

    我就那么1条,咱也不关心收录了,爱收收不收算了

      小赵同学博主
      7个月前

      嘴上说着不关心,是不是还有时候看几眼

    7个月前

    我 site 根本就一条都没有收录!!!

      小赵同学博主
      7个月前

      有啊,我site你的博客,有一条,是首页收录的链接,可能是主题模版的seo没有优化好

生活
今天有空看了一下自己博客收录的链接,我开始慌了
临近放假,基本上没有什么课了,接下来主要是对考试内容的复习咱们专业也是戴上了考试课最多的帽子,结课考试要考七门排的是三天考试时间,时间的话,...
扫描右侧二维码继续阅读
December 16, 2021
优世界
blogger
小赵同学
统计
文章:87 篇
评论:1641 条
加载耗时:31 ms
访问总量:150,581次
运行时长:2年192天
by yoniu.
优世界