Categories

Tags

抓取异常的原因有哪些

一、网站异常

1、dns异常

当Baiduspider无法解析您网站的IP时，会出现DNS异常。可能是您的网站IP地址错误，或者域名服务商把Baiduspider封禁。请使用WHOIS或者host查询自己网站IP地址是否正确且可解析，如果不正确或无法解析，请与域名注册商联系，更新您的IP地址。

2、连接超时

抓取请求连接超时，可能原因服务器过载，网络不稳定

3、抓取超时

抓取请求连接建立后，下载页面速度过慢，导致超时，可能原因服务器过载，带宽不足

4、连接错误

无法连接或者连接建立后对方服务器拒绝

二、链接异常

1、访问被拒绝

爬虫发起抓取，httpcode返回码是403

2、找不到页面

爬虫发起抓取，httpcode返回码是404

3、服务器错误

爬虫发起抓取，httpcode返回码是5XX

4、其他错误

爬虫发起抓取，httpcode返回码是4XX，不包括403和404

来源：百度搜索资源平台 百度搜索学堂


 Public @ 2018-09-22 16:02:23

百度站长平台《VIP大讲堂》上海开讲

百度站长平台《VIP大讲堂》已在北京连续举办两期，收获颇多赞誉，为了让更多城市的VIP成员享受到此项特权，10月31日，《VIP大讲堂》走进上海百度办公室，来自携程、大众点评、前程无忧、返利网等30余家上海及周边城市的VIP俱乐部成员，现场聆听百度站长平台高级工程师孙权讲解《如何建设对百度Spider友好的站点》，全程2个多小时的讲解、互动、问答，大家仍然表示意犹未尽。孙工从百度Spider抓取、

 Public @ 2019-11-21 16:07:26

什么是视频极速体验页

搜索视频极速体验服务旨在提升用户观看视频体验的一项富媒体体验升级服务，本服务针对短视频需求场景进行体验优化，将为搜索用户提供稳定、流畅、清晰的播放及浏览体验。视频极速体验服务包含视频极速页和合作平台两部分服务，网站可前往平台完善服务设置，获取各项搜索权益。详情参考《视频极速体验服务说明》。来源：百度搜索资源平台

 Public @ 2023-01-30 16:05:29

更多您感兴趣的搜索

0.461625s