当前位置:首页 > 随心记录 > 正文内容

如何检查和处理网站死链?分享网站死链的正确处理方法!

爱链网1年前 (2020-09-26)随心记录179

很多朋友建站之初可能没想好自己要做什么,或者采集了很多内容,在后期运营时找到了建站的方向,从而删除掉之前发布的内容,这就导致了网站死链的产生。如果我们删掉的内容被用户收藏了,或者被百度抓取评测和收录了,那无论是对用户来说还是对百度等搜索引擎来说,都会降低对我们网站的信任,从而导致我们网站排名的下降。

如何检查和处理网站死链?分享网站死链的正确处理方法! 第1张

死链其实是不可避免的,不管是主观删除还是网页运营调整都会导致死链的产生,能够合理的处理死链是会规避百度的处罚的,对于站长朋友们来说,不惩罚当然是最好的了。那么该如何检查和处理网站死链呢?这篇文章我们就跟大家一起来深度学习一下:

如何检查出网站的死链接?

1、百度站长工具

很多时候我们自己批量删除网页和网站内容时,我们不太注意也不太容易统计出到底删除了哪些内容,此时,我们就不得不通过百度站长工具中的抓取异常工具,查看最近一个月产生的各种死链。百度站长工具非常方便,支持导出功能。

2、使用爬虫软件

同样的,指望大家一条条链接翻看,不知道得猴年马月才能完成。我们完全可以使用爬虫软件,比如Xenu,此类工具可以爬取全站所有链接并分析页面状态,分析完成后,支持导出功能,提取死链接即可。

3、主动记录删除的网页

在网站运营中,难免会需要手动删除一些网页,比如会员提交的内容不健康等等,经常需要删除这些页面。大家在删除页面时一定要记录对应的Url以便后期提交死链。

获得了死链后,如何正确处理死链呢?

1、已被收录的页面

网站中的有些死链是已经被收录的,对于这种情况应该使用百度站长平台,对百度站长平台有了解的站长都知道,百度站长中存在一个规则性死链的提交地址,一般网站中存在的死链都是有规则的,我们需要总结出来规则在百度站长中提交,直到死链不收录为止。

2、网站改版或者修改导致的网站死链问题

这种情况往往的死链比较多,很难进行处理。我们需要做的就是把这些死链总结出来规则,写到robots文件中,让搜索引擎蜘蛛清楚的知道,此规则下的链接禁止抓取。

3、利用站长工具

爱站工具和站长工具都提供了死链检查功能,站长朋友们可以对整个网站进行检查,查询到死链的具体位置,然后再进行死链的删除,最后需要向百度搜索引擎提供死链链接的提交。

相关注意事项:

1、在百度站长工具中提交死链前,一定要确保提交的死链数据不存在活链接。一旦存在活链,会显示提交失败导致无法删除。

2、由于很多网站程序问题,很多打不开的页面返回码并非404,这是一个大问题,比如明明是打不开的页面返回码是301、200、500,如果是200的话,会导致网站中出现不同URL获取相同内容。比如我的一个站,社区的帖子删除后,返回码却是500,后期发现了,立马进行了处理。大家尽量找出所有错误URL格式,并设置HTTP状态码为404。

3、把所有的错误页面找到后,一定要寻找此类页面URL相同特征,并且和正常页面的特征有区分,写对应规则到robots文件中,禁止蜘蛛抓取,就算你已经在站长工具中提交了死链,也建议robots封禁抓取。

4、robots只能解决蜘蛛不再抓取此类页面,但解决不了已经收录页面的快照删除问题,若你的网站被黑,删除了被黑页面,除了robots封禁被黑页面外,还应该将这些页面提交死链。提交死链是删除被黑页面快照的最快办法。

以上就是爱链网给大家分享的处理死链的方法,希望可以帮到新手朋友们。总之,死链一定要引起朋友们的重视,需谨慎对待,如果不处理会对网站的后期发展产生不利的影响。

相关文章

采集与“原创”齐发,让搜索引擎摸不到头脑!

采集与“原创”齐发,让搜索引擎摸不到头脑!

站群的收录是一个艰巨的任务,意味着网站的成败,与自己的钱袋子息息相关。由于自己还在摸索当中,所以在到处找大佬套技巧,还好近些天又收获一个重要的知识:采集与“原创”齐发。为什么呢?大佬说,你所谓的“原创...

感觉自己萌萌哒,一口气建设了30个网站!

感觉自己萌萌哒,一口气建设了30个网站!

有时候借助批量建站工具也是非常麻烦的,很耗费心神精力。比如,一次性建设30个网站,全程都需要保持集中精力,一旦发生一点出入,就可能需要一个个排查原因。不怕过程中有多难,就怕程序比较繁琐,一不留神就出现...

Shopee想要低价冲量?别忘了做好数量限制!

Shopee想要低价冲量?别忘了做好数量限制!

做Shopee没有流量没有销量怎么办?聪明的你肯定想到要搞个引流款,要低价冲销量,设置各种优惠手段。没错,我也是这么搞的,但我发文章说明我搞砸了……为什么呢?我的买家一口气买了21个,为了凑够我店铺的...

网站优化过程中的关键词如何选取?

网站优化过程中的关键词如何选取?

在网站优化的过程中,关键词的选取是一个重要的任务,关系着网站日后的成长以及所有文章的立意。在建站之前,如果没有认真考虑关键词,没有做好关键词的选取工作,那么网站的整体发展前途定然不会太好。而如果建站之...

网站首页终于可以site出来了,但是却还是很久以前的!

网站首页终于可以site出来了,但是却还是很久以前的!

这网站改版、改内容很久了,后台也监测到每天都有来自于百度的蜘蛛爬取,但是网站不但一条新的收录都没有,连首页都不释放出来。我之前还在推测是因为标题含有敏感词的关系,现在看来根本就不是这个问题,显然是百度...

出售已备案域名赚钱可行吗?有什么风险?

出售已备案域名赚钱可行吗?有什么风险?

现在的百度收录是相当难做了,未备案域名也许是有漫长的考察期久久都难以收录,很多朋友都转向备案域名了。自己备案其实并不难,比如在阿里云备案,需要准备好域名和阿里云的虚拟主机或者服务器。个人备案还好说,使...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。