Categories

Tags

抓取异常的原因有哪些

一、网站异常

1、dns异常

当Baiduspider无法解析您网站的IP时，会出现DNS异常。可能是您的网站IP地址错误，或者域名服务商把Baiduspider封禁。请使用WHOIS或者host查询自己网站IP地址是否正确且可解析，如果不正确或无法解析，请与域名注册商联系，更新您的IP地址。

2、连接超时

抓取请求连接超时，可能原因服务器过载，网络不稳定

3、抓取超时

抓取请求连接建立后，下载页面速度过慢，导致超时，可能原因服务器过载，带宽不足

4、连接错误

无法连接或者连接建立后对方服务器拒绝

二、链接异常

1、访问被拒绝

爬虫发起抓取，httpcode返回码是403

2、找不到页面

爬虫发起抓取，httpcode返回码是404

3、服务器错误

爬虫发起抓取，httpcode返回码是5XX

4、其他错误

爬虫发起抓取，httpcode返回码是4XX，不包括403和404

来源：百度搜索资源平台 百度搜索学堂


 Public @ 2018-09-22 16:02:23

百度站内搜索新首页惊艳亮相—三大新功能锦上添花

百度站内搜索新首页已经惊艳亮相，并且添加了三大新功能，为用户带来更加便捷的搜索体验。 首先，百度站内搜索将会显示搜索内容的相关度排名，使用户可以更快地找到需要的信息。 其次，百度站内搜索还提供了一个“搜索建议”功能，可以为用户推荐相关的搜索关键词，帮助他们更快地找到所需的信息。 最后，百度站内搜索还提供了一个“搜索历史记录”功能，可以让用户方便地查看和管理其以前的搜索记录，以便于更好地进行个

 Public @ 2023-06-10 15:00:14

关于site域名后提示“危险网站”的公告

亲爱的网站管理员：站长们在site网站域名的时候会发现，百度网址安全中心会出现“存在高危漏洞”的风险提示。为了让站长更好的优化网站，百度云加速使用的漏洞扫描器是企业级别扫描器，对站点安全要求更加严格，所以会有一些站长认为不是漏洞的安全问题（例如服务器或者PHP版本低）也被百度标记为危险网站。目前我们正在优化策略消除大家的困惑，百度很快就可以恢复之前的状态请大家不要过于担心。如果你觉得百度网址安全中

 Public @ 2018-01-04 16:06:55

百度搜索打击盗版网文站点公告

为了加强知识产权保护，维护正版站点的排序权益，百度搜索将在近期以技术手段，对有盗版特征（如笔趣阁）的小说、网文站点进行识别和处置，以给更多优秀站点展现空间，共建良性的网络生态环境。来源：百度搜索资源平台

 Public @ 2022-03-14 15:51:02

百度站长平台升级为搜索资源平台 并推新阿拉丁开放生态

近日，百度搜索资源平台陆续在杭州、南京、上海三地举办“百度搜索大讲堂&高端沙龙”活动，旨在向广大搜索生态站点伙伴全面介绍百度搜索的新产品、新规则等信息。在此次系列活动中，百度宣布正式将站长平台升级成为搜索资源平台，同时还宣布推出新的阿拉丁开放生态，打造更为优质的互联网搜索生态。新平台活化搜索生态站长平台是百度搜索为了更好地服务站长所建立的平台，已经上线运营多年，是站长和百度之间沟通的纽带。

 Public @ 2016-11-30 16:06:02

更多您感兴趣的搜索

0.480716s