百度抓取异常工具升级版上线
- 威海百度搜索资源平台 威海百度搜索资源平台
- 698
作者：百度站长平台 发布时间：2013年5月28日
各位网站管理员：
很高兴的通知大家，百度站长平台抓取异常工具升级上线。升级之后的抓取异常工具将为站长提供更详细的抓取异常原因及异常的页面，便于站长更快捷的解决网站在百度中的抓取异常问题，避免对网站造成收录及流量的损失。
本次工具亮点：
1、提供更多的抓取异常分析：改版之后提供8种抓取异常的原因，帮助站长更快的发现及定位原因，解决网站的抓取问题。
2、提供更详细的异常页面。
抓取异常工具地址：http://zhanzhang.baidu.com/crawl/index
一、什么是抓取异常？为什么要关注网站的抓取异常？
对于网站中可正常访问的页面，baiduspider抓取的结果应与普通用户访问的内容是一致的，当baiduspider抓取的内容与普通用户访问的内容不一致时，即为该网站的内容在百度中存在抓取异常。
对于大量内容无法正常抓取的网站，搜索引擎会认为网站存在用户体验上的缺陷，并降低对网站的评价，在抓取、索引、权重上都会受到一定程度的负面影响，最终影响到网站从百度获取的流量。
二、抓取异常工具升级之后能够提供哪些异常？
1、404错误：当baiduspider在抓取您网站时，发现大量的404页面（协议死链或内容死链）时，会在抓取异常工具中将这类页面进行展示，建议通过百度站长平台--死链工具提交死链的方式进行处理，以便搜索引擎更快地发现死链，减少死链对用户以及搜索引擎造成的负面影响。
2、服务器连接异常：是指baiduspider在连接您的网站时发生的无法正常连接的问题。服务器连接异常会有两种情况：一种是站点不稳定，Baiduspider尝试连接您网站的服务器时出现暂时无法连接的情况；一种是Baiduspider一直无法连接上您网站的服务器。
3、网络运营商异常：是指Baiduspider通过电信或网通无法访问您网站的问题。如果出现这种情况，您需要与网络服务运营商（电信或网通）进行联系，或者购买拥有双线服务的空间或者购买cdn服务。
4、DNS异常：是指Baiduspider无法解析您网站的IP，从而无法正常抓取收录您网站的内容。可能是您的网站IP地址错误，或者域名服务商把Baiduspider封禁。
5、IP封禁：限制网络的出口IP地址，禁止该IP段的使用者进行内容访问。
6、UA封禁：UA即为用户代理（User-Agent），服务器通过UA识别访问者的身份。当网站针对指定UA的访问，返回异常页面（如403，500）或跳转到其他页面的情况，即为UA封禁。
7、异常跳转：将网络请求重新指向其他位置即为跳转。
8、其他异常
展示图如下：
抓取异常图.png
来源：百度搜索资源平台
