Categories


Tags


一站式解决网站死链问题

在网站日常运营,死链是难免会产生的,不仅影响了用户体验,也影响了搜索效果;针对这一现象,我们邀请了站长社区版主—三木为大家分享死链处理心得。

本文主要讲述死链对网站的影响;死链是如何产生的;如何发现死链;如何正确处理死链。

一、大量死链对搜索引擎来讲,有什么影响?

1、死链率过高,会影响搜索引擎对网站的评分。

2、搜索引擎对每个网站每天抓取的频次是限额的,若网站存在大量死链,会浪费掉抓取配额并影响其他正常页面的抓取。

3、过多死链对网站用户来讲也是体验不好的表现。

二、死链接是如何产生的?

1、网站内部添加了错误的内部链接

编辑失误或者程序员大意让页面产生了不存在的页面。

2、网站短暂无法访问

因为服务器、空间或程序问题导致网站短暂无法访问,产生大量返回码为5开头的服务器错误页面。

3、外部链接错误

用户或者站长在站外发布了错误URL;别的网站复制或采集了你们含有错误链接的页面。

4、爬虫提取了不完整的URL

个别爬虫在提取页面URL的时候,因为URL中有不规则字符或者URL与后边的文字链接起来,导致URL失效。

5、网站改版

如果你的网站已经改版或者将要改版,一定要注意死链问题,很多网站改版后,之前的老页面直接删除,导致了大量的死链接。

6、管理员删除页面

网站管理员删除被黑、广告、过时、被灌水页面导致很多死链接。

三、如何发现网站中存在的死链接?

1、百度站长工具中的抓取异常工具可以查看最近一个月产生的各种死链,并支持导出功能。

2、使用相关爬虫软件,比如Xenu,此类工具可以爬取全站所有链接并分析页面状态,分析完成后,支持导出功能,提取死链接即可。

3、在网站运营中,特别是论坛,经常需要删除某些页面,在删除页面时一定要记录对应的Url以便后期提交死链。

通过上述两种办法提取的死链列表,一定要经过删重和验证,比如用wps表格进行删除重复链接,然后再使用Http状态批量查询工具验证下是否确实是死链接。

四、如何避免和处理死链接?

1、网站改版最容易产生死链的

改版之前的页面如果有价值尽量不要删除和修改Url,若需要更换域名或Url分配规则,那一定要将之前的url进行301跳转到对应的Url;若老的数据必须删除,那删除的所有页面Url要进行整理和提交死链。

2、对发现的死链接如何处理

将收集好的所有死链接粘贴到网站根目录的一个文档中,再把文档地址提交到百度资源平台-搜索服务-资源提交-死链提交--添加新数据--填写死链文件地址;若大量死链具有一定的规则,如某个目录下全部为死链接,可提交规则死链。

相关注意事项:

1、在百度站长工具中提交死链前,一定要确保提交的死链数据不存在活链接。一旦存在活链,会显示提交失败导致无法删除。

2、由于很多网站程序问题,很多打不开的页面返回码并非404,这是一个大问题,比如明明是打不开的页面返回码是301、200、500,如果是200的话,会导致网站中出现不同URL获取相同内容。比如我的一个站,社区的帖子删除后,返回码却是500,后期发现了,立马进行了处理。大家尽量找出所有错误URL格式,并设置HTTP状态码为404。

3、把所有的错误页面找到后,一定要寻找此类页面URL相同特征,并且和正常页面的特征有区分,写对应规则到robots文件中,禁止蜘蛛抓取,就算你已经在站长工具中提交了死链,也建议robots封禁抓取。

4、robots只能解决蜘蛛不再抓取此类页面,但解决不了已经收录页面的快照删除问题,若你的网站被黑,删除了被黑页面,除了robots封禁被黑页面外,还应该将这些页面提交死链。提交死链是删除被黑页面快照的最快办法。

来源:百度搜索资源平台 百度搜索学堂


Public @ 2014-05-03 15:36:54

善用抓取诊断工具:站点IP变更

站点IP变更可能导致网站无法访问,对于网站管理员来说需要及时进行诊断和处理。以下是使用抓取诊断工具进行站点IP变更诊断的步骤: 1. 使用ping命令检测站点是否可以访问。在命令提示符或终端中输入ping加上站点域名或IP地址,例如“ping www.example.com”或“ping 192.0.2.1”。如果无法ping通站点,则可能是站点IP变更导致的问题。 2. 使用tracerou

Public @ 2023-04-03 23:00:29

死链接是如何产生的?

1、网站内部添加了错误的内部链接编辑失误或者程序员大意让页面产生了不存在的页面。2、网站短暂无法访问因为服务器、空间或程序问题导致网站短暂无法访问,产生大量返回码为5开头的服务器错误页面。3、外部链接错误用户或者站长在站外发布了错误URL;别的网站复制或采集了你们含有错误链接的页面。4、爬虫提取了不完整的URL个别爬虫在提取页面URL的时候,因为URL中有不规则字符或者URL与后边的文字链接起来,

Public @ 2018-09-21 15:36:53

什么是死链&;死链的标准

死链(Dead Link)是指网页上已经失效但仍然出现在超链接中的链接,或者指向网页内的地址。 死链的标准通常有以下几点: 1. 服务器错误或页面不存在:点击链接后页面无法正常打开,出现404等错误页面。 2. 指向过期或已删除的网页:点击链接后打开网页内容已不存在或已过期。 3. 指向被禁止访问的网页:点击链接后无法打开,可能是因为网页被禁止访问或需要权限才能访问。 4. 指向已更改地

Public @ 2023-06-15 23:50:20

如何处理网站上出现的死链接?

用新浪博客做排名,是不是新浪博客的等级也会影响博客的百度排名;是不是等级高的博客会比较容易获得好的百度排名?夫唯有这个可能。因为等级高的,在新浪站内获得比较多的内链。烟火站内一篇原创文章并不会因为小量的在外推平台重复而影响站内的收录是吗?相反,适当的重复会不会给搜索引擎造成文章重要性的假象?夫唯一般站内的文章被收录后,发部分到站外,是没坏处的,相反有点好处。搜索引擎还认为是你的文章质量好,被人引用

Public @ 2021-05-15 15:56:17

更多您感兴趣的搜索

0.437242s