Categories

Tags

抓取异常的原因有哪些

一、网站异常

1、dns异常

当Baiduspider无法解析您网站的IP时，会出现DNS异常。可能是您的网站IP地址错误，或者域名服务商把Baiduspider封禁。请使用WHOIS或者host查询自己网站IP地址是否正确且可解析，如果不正确或无法解析，请与域名注册商联系，更新您的IP地址。

2、连接超时

抓取请求连接超时，可能原因服务器过载，网络不稳定

3、抓取超时

抓取请求连接建立后，下载页面速度过慢，导致超时，可能原因服务器过载，带宽不足

4、连接错误

无法连接或者连接建立后对方服务器拒绝

二、链接异常

1、访问被拒绝

爬虫发起抓取，httpcode返回码是403

2、找不到页面

爬虫发起抓取，httpcode返回码是404

3、服务器错误

爬虫发起抓取，httpcode返回码是5XX

4、其他错误

爬虫发起抓取，httpcode返回码是4XX，不包括403和404

来源：百度搜索资源平台 百度搜索学堂


 Public @ 2018-09-22 16:02:23

百度搜索资源平台-官网LOGO部分站点禁用通告

尊敬的用户： 近日，百度搜索资源平台官网的LOGO部分被恶意站点盗用，严重侵犯了百度平台的版权及商标权，同时也恶化了用户体验。 为了维护平台的合法权益及用户利益，百度决定针对以上恶意行为，对涉事站点进行站点禁用，并保留追究法律责任的权利。 在此，我们提醒广大用户： 1.请勿在涉事站点进行任何搜索或操作，以免造成不必要的损失。 2.如遇到任何盗用或侵权问题，请及时联系平台客服或发送邮件至c

 Public @ 2023-04-29 02:00:10

百度智能小程序-代码包审核

代码包审核会对小程序体验、功能、内容与名称、类目的相关性等维度进行审核，具体审核规则请参考平台运营规范。提交审核前需确保服务类目审核通过，否则小程序将无法提交代码包。当开发完成后可从开发者工具中点击发布上传代码,用于提交审核使用。图片从开发者后台“小程序管理 -> 版本管理”模块点击“提交审核”按钮完成代码包的提交。图片您可以从系统通知中了解您的代码包审核结果，如有任何疑问，您也可以从界面右

 Public @ 2010-11-28 16:03:17

百度站长平台：“站长+”时代全新出击

百度站长平台最近推出了全新的产品“站长+”，这是一个为站长量身定制的工具，可以帮助站长深入了解网站的运营情况，提高网站的流量和收益。 “站长+”集成了百度站长平台的所有功能和服务，包括站内优化、站外优化、审核管理、数据分析和网络安全等，并提供了许多新的工具和服务，例如页面访客属性分析、站长问答、API接口等。 “站长+”的

 Public @ 2023-06-20 10:50:20

更多您感兴趣的搜索

0.467758s