Categories

Tags

抓取异常的原因有哪些

一、网站异常

1、dns异常

当Baiduspider无法解析您网站的IP时，会出现DNS异常。可能是您的网站IP地址错误，或者域名服务商把Baiduspider封禁。请使用WHOIS或者host查询自己网站IP地址是否正确且可解析，如果不正确或无法解析，请与域名注册商联系，更新您的IP地址。

2、连接超时

抓取请求连接超时，可能原因服务器过载，网络不稳定

3、抓取超时

抓取请求连接建立后，下载页面速度过慢，导致超时，可能原因服务器过载，带宽不足

4、连接错误

无法连接或者连接建立后对方服务器拒绝

二、链接异常

1、访问被拒绝

爬虫发起抓取，httpcode返回码是403

2、找不到页面

爬虫发起抓取，httpcode返回码是404

3、服务器错误

爬虫发起抓取，httpcode返回码是5XX

4、其他错误

爬虫发起抓取，httpcode返回码是4XX，不包括403和404

来源：百度搜索资源平台 百度搜索学堂


 Public @ 2018-09-22 16:02:23

关于服务器在国外网站的收录问题公告

近期收到站长反馈，网站在百度搜索中展示出现问题；经查，服务器在国外的中文网站，将在百度搜索中出现展示问题，请有此情况的网站提前知悉。关于网站服务器问题请参考文章《关于服务器选择的友好提示》，请各位站长安全建站，共筑良性互联网生态。来源：百度搜索资源平台

 Public @ 2015-08-30 16:06:05

百度搜索资源平台-关于站点属性中文名审核功能暂缓开放的公告。

亲爱的用户： 感谢您对百度搜索资源平台的关注和支持。为了提供更好的服务，我们将对站点属性中文名的审核功能进行优化。为了保证审核的准确性和有效性，在调整期间我们会暂缓开放该功能。 具体调整时间将根据系统优化进展而定，预计暂停的时间可能会较长。在此期间，您可以继续使用其他站点属性的功能，如网站域名、分类标签等。 我们非常抱歉给您带来的不便，同时也希望您能够理解我们的调整和优化目的。我们将尽快推出

 Public @ 2023-06-29 12:50:13

移动化培训长沙视频7——代码适配自适应对百度友好

在杭州的移动化沙龙上，刘院长就说过，百度并没有排斥代码适配和自适应站点，正在抓紧时间解决这两类站点在收录建库排序中遇到的问题。同时学院也前后发表过《代码适配移动站点对百度友好案例分享》《自适应站点如何做到对百度友好》，后续还会上新更多相关技术文章，那今天我们先来看看刘院长在长沙移动化培训中是如何解释这个问题的。

 Public @ 2015-03-31 16:02:14

更多您感兴趣的搜索

0.597801s