Categories


Tags


新浪死链处理经验分享

在第四次深“度”接触结束后,spider工程师表示新浪的死链处理工作一直效果不错,提醒学堂应该请其做个分享。新浪稳座国家级门户头把交椅,谁还敢说自己网站结构的复杂程度可以超越新浪。于是我们请王久明分享一下新浪在死链处理和死链预防(重要页面因修改而产生死链)方面的经验。

一、在以下背景下会较多产生死链:

1、时政新闻的敏感性;

2、来自监管的删除需求;

3、频道(编辑)自身删改的需求;

4、搜索方期望资源方主动优化和定期清除的需求

二、死链分类:

由于系统架构、历史遗留问题、多业务系统交叉影响等多方面因素,新浪存在如下三种死链:

1、协议死链,服务器端返回HTTP状态码404;

例如:‘谁在伪善’http://news.sina.com.cn/movie/music/1999-06-15/2965.shtml

2,内容死链,服务器端返回HTTP状态码200,无法设置为404;

例如:http://news.sina.com.cn/c/2015-04-23/184531753084.shtml

3,页面需要用户和蜘蛛可以正常访问,但由于删改或误操作导致反复上下线形成协议死链或内容死链。例如:http://news.sina.com.cn/2015-12-05/doc-ifxmhqaa9933763.shtml

上线后又下线,后又上线,甚至反复多次。由于下线期间存在协议死链或内容死链的情况,导致百度认为该页面应该被删除,不被收录,且即使后续重新上线也无法恢复收录。对于这种情况,应加以预防。

三、解决方案:

1、协议死链,这个最符合HTML标准处理方式,站点方面无须多做什么,如果需要百度快速处理可以通过百度站长平台的死链提交工具(/college/courseinfo?id=267&page=4#h2_article_title18)进行主动提交

2,无法设置协议死链接,仅主体内容文本被删除的内容死链死链,新浪的处理方法是:

1)走事先之制定好的《死链标准流程》:用站内标准内容死链模板页面(告诉用户该页无法找到)覆盖需要删除的页面,5秒后跳转到统一的全站导航页,以减少用户流失。

2)根据需要,比如根据特定关键词圈定一批最终需要处理为协议死链的敏感页面,将这些页面链接放到一个文件里,由专人在服务器端修改成协议死链。通过百度站长平台工具进行死链提交

3,针对反复上下线导致百度误判为死链的情况,新浪的预防办法是:

1)制度上:系统后台设置提醒,提醒编辑上线后除非特殊情况不要下线;

2)功能上:这种情况在专题运营中最常见,且影响比单篇新闻页要大,由于我站点运营规定是不能删除页面的,因此在系统后台将“删除专题(对编辑来说就是删除该专题)”和“将专题调整为不对外显示(对编辑来说不是删除,而是暂时下线,调整为外网用户无法访问,可随时再次重新上线)”两个功能严格区分开,并提供回收功能。针对“将专题调整为不对外显示”这种情况,不再将页面更新为内容死链(页面无法找到),以免被百度误判。专题页面仍可访问,只是站点不设置入口、不进行推广,用户没有访问来源而已。

来源:百度搜索资源平台 百度搜索学堂


Public @ 2013-02-21 15:36:49

一站式解决网站死链问题

在网站日常运营,死链是难免会产生的,不仅影响了用户体验,也影响了搜索效果;针对这一现象,我们邀请了站长社区版主—三木为大家分享死链处理心得。本文主要讲述死链对网站的影响;死链是如何产生的;如何发现死链;如何正确处理死链。一、大量死链对搜索引擎来讲,有什么影响?1、死链率过高,会影响搜索引擎对网站的评分。2、搜索引擎对每个网站每天抓取的频次是限额的,若网站存在大量死链,会浪费掉抓取配额并影响其他正常

Public @ 2014-05-03 15:36:54

服务器ARP的欺骗攻击与防范

题记:如果你是从搜索引擎搜到这里的,我相信你一定非常着急,废话不多说,直入主题。其余感悟我挪到文章最后说。我这里讨论是卢松松博客最近被ARP攻击的例子,烦死了。表现形式为网站被iframe挂马,弹出大量色情网站,问题出现了11个小时,这11小时都在血泪的探索中解决。血与泪的经验:服务器ARP的欺骗攻击与防范 服务器 网站安全 经验心得 第1张判断ARP攻击方法一台服务器几乎所有网站打开网页HTML

Public @ 2014-03-08 15:37:53

死链接是如何产生的?

死链接是指指向不存在目标网页或网页已经被删除的链接。产生死链接可能有以下几种情况: 1.链接目标网页已经被删除或不存在,比如网站对某个页面进行了更新,但没有修改原来的链接。 2.链接目标网页的网址被修改,不再是原来的网址了,但链接未被更新。 3.链接目标网页被移动到了其他的位置,但链接未被更新。 4.链接目标网页存在,但由于一些原因,比如服务器宕机、网络故障等,导致无法访问。 5.链接目

Public @ 2023-06-14 01:00:20

及时处理死链可以给站长带来什么

处理死链可以给站长带来以下几点好处: 1. 提升站点用户体验:死链会导致用户访问不了页面,给用户带来困扰和不良体验。通过及时处理死链,可以保证用户能够正常访问页面,提升站点的用户体验。 2. 提高搜索引擎排名:网站中有大量的死链会影响搜索引擎的排名,因为搜索引擎会认为这是一个信号,表明网站内容不够健康。通过及时处理死链,可以提高网站的搜索引擎排名,让更多用户发现和访问网站。 3. 减少流量损

Public @ 2023-06-07 06:00:11

更多您感兴趣的搜索

0.643659s