24小时免费热​线

我们有超过10年的SEO优化行业经验

成功服务客户超3000家！​​

全方位网络推广解决方案
为您定制专属网站优化
快速响应  /  精准匹配  /  高效服务  /  专业售后
网站首页 >> 新闻资讯 >> SEO知识 >> 为防止蜘蛛爬取中断，死链接请及时处理

为防止蜘蛛爬取中断，死链接请及时处理

来源: | 作者:云贸互联 | 发布时间: 2021-05-13 | 3750 次浏览: | 分享到:
　　近期遇到很多站长问自己的网站为什么不收录，百度不来抓取自己的网站，在通过分析他们的网站后，就知道他们都是粗心的大老糙。网站死链接存在一大堆都不去处理，也难怪百度蜘蛛不去抓取你的网站，百度蜘蛛也是很智能的你的网站像个迷宫一样走一条路就堵死了。或许百度蜘蛛还没开始爬取你的网站就被堵死了，久而久之当你不去爬取你的网站喽，所以说为了网站的收录死链接还是必须要处理的。下面我们来具体了解下死链接的情况。


死链接
 

　　死链接是什么

 
　　死链接百科介绍：死链接简单讲：就是原来本来可以正常访问的链接，后来由于一些原因导致失效的链接。死链接发送请求时，服务器返回404错误页面。
 

　　死链接检测工具

 
　　死链接检测工具-站长工具：http://tool.chinaz.com/Links/
 
　　死链接检查工具-Xenu：http://www.wmzhe.com/soft-38575.html
 
　　死链接检查工具-搜外：http://seo.seowhy.com/linkdetection/
 

　　死链接产生的原因

 

　　1、网站改版

 
　　网站改版是站长们头疼的，除了担心死链接的产生还要被百度关进“小黑屋”一段时间，网站改版引起的URL变化是死链产生的原因之一。
 

　　2、网站数据库出错

 
　　对于那些全静态的网站，数据库一定要格外小心，因为一个参数的变动就可能导致很多网页打不开，也就是死链。
 

　　3、网站内容被误删

 
　　这种情况是悲催的，操作后台或数据库的时候，一不小心删掉了某个网页，那么相应的死链接就产生了，如果网站大批量的出现这种情况，可能导致网站降权甚至被K！
 

　　4、网站被黑客攻击

 
　　黑客攻击是现在网站都可能被存在的问题，因为相对来说基本上服务器攻击对现在的黑客来说是轻而易举的事情了，只要他想要对你进行攻击基本上很难抵制，不过我们要做的就是提高警惕，避免一些页面内容被删、网站数据链接错误的情况。如果一些小型的企业网站没有这方面的顾虑，黑客不会无缘无故的黑你的网站，因为没有价值。
 

　　5、网站更换了服务器或空间

 
　　网站更换了服务器或空间，就会导致网站的ip发生变化，也是网站死链产生的原因之一。
 

　　6、网站目录修改

 
　　网站目录的名称修改，必然导致网页的URL路径发生变化，旧的URL链接就会成为死链。
 

　　7、马虎大意产生的死链接

 
　　在给网站添加锚链接等内部链接的时候，不够细心导致填写URL路径的时候多写了一些符号或斜线等，也容易让网站产生死链接。
 

　　死链接产生的危害

 

　　1、用户的流失

 
　　当一个页面变成了死链接之后，如果没有做404引导用户，用户会直接跳出。如果网站中有大量的死链，就算做了404，也会让用户失去信心，导致跳出，感觉这个网站是垃圾站，会彻底放弃这个站，找别的相同的网站。
 

　　2、降低搜索引擎的友好度

 
　　众所周知，搜索引擎是通过链接进行爬取，链接好比搜索引擎走的路。如果死链接过多，无疑是让搜索引擎走进很多死胡同，从而增加了搜索引擎的工作量，消耗搜索引擎的服务器资源。所以在搜索引擎的眼里，这个网站有很多死胡同，以后也就不爱来了，自然的就降低了这个网站对搜索引擎的友好度了。
 

　　3、网站的权重降低

 
　　大家都知道，网站的权重是通过链接传递的，无价值的死链接会分散我们网站自身的权重，已经被搜索引擎所收录的网页路径被删除了，形成没法打开的死链接，原本继承一定权重。若形成大量的死链接后权重会丢失，很容易导致降权。
 

　　4、关键词排名下降

 
　　根据上述，我们的排名肯定会下降，用户的流失会导致受众的降低，受众是关键词排名的核心要素，蜘蛛的友好度降低，会导致我们收录量下降。这样网站关键词排名能不下降吗?
 

　　死链接的处理方法

 
　　1、搜索引擎站长后台提交死链：网站的死链用专业的检查工具检测出来后，把死链做做成文本的形式或者是像网站xml地图的形式，把死链进行逐条的弄好，在网站的根目录进行上传，然后再到搜索引擎的站长后台提交搜索引擎的处理。
 
　　如百度站长后台一样，把网站的死链txt文档或者xml格式的死链提交，提交的死链url链接为http：//域名/silian.txt或者是http://域名/silian.xml。
 
　　2、Robots文件禁止：如果网站上面产生的robots文件较少的时候，SEO优化人员或者是站长就可以在网站的robots文件中禁止搜索引擎收录和抓取网站的404页面，robots文件禁止搜索收录和抓取404页面或者网站里面其他的url链接的写法为Disallow:http://域名/silian.html。
 
　　3、搜索引擎快照的投诉：巧用搜索引擎快照投诉方法，提高网站的死链快速被搜索引擎处理，减少网站死链的积累。具体操作以百度搜索引擎所示为例：
 
　　4、制作网站的404页面：做网站SEO优化的人员都会知道网站制作404页面，当网站产生死链的时候，网站的http状态码将会变成404状态，及用户请求的网页不存在。一方面制作网站的404页面可以引导用户访问网站里面的其他页面，减少用户的流失和增加网站的访问pv，另一方面网站制作404页面可以有效的引导搜索引擎爬虫继续访问网站里面的其他页面，而不至于在网站的死链处无法继续爬取网站的其他页面而终止对网站的页面的爬取。