Categories

Tags

抓取异常的原因有哪些

一、网站异常

1、dns异常

当Baiduspider无法解析您网站的IP时，会出现DNS异常。可能是您的网站IP地址错误，或者域名服务商把Baiduspider封禁。请使用WHOIS或者host查询自己网站IP地址是否正确且可解析，如果不正确或无法解析，请与域名注册商联系，更新您的IP地址。

2、连接超时

抓取请求连接超时，可能原因服务器过载，网络不稳定

3、抓取超时

抓取请求连接建立后，下载页面速度过慢，导致超时，可能原因服务器过载，带宽不足

4、连接错误

无法连接或者连接建立后对方服务器拒绝

二、链接异常

1、访问被拒绝

爬虫发起抓取，httpcode返回码是403

2、找不到页面

爬虫发起抓取，httpcode返回码是404

3、服务器错误

爬虫发起抓取，httpcode返回码是5XX

4、其他错误

爬虫发起抓取，httpcode返回码是4XX，不包括403和404

来源：百度搜索资源平台 百度搜索学堂


 Public @ 2018-09-22 16:02:23

百度索引量工具数据恢复公告

尊敬的用户： 我们深感抱歉的通知您，百度索引量工具数据恢复工作由于技术问题未能如期完成。原计划于11月30日，针对10月份的索引量展开数据查询与恢复，但在执行过程中发现了系统bug，需要更多时间来修复。 我们已经调派了专业技术团队全力以赴，争取尽快解决问题。同时，我们也会加强对系统的监测和测试工作，确保这样的问题不再出现。 我们知道这次事故给您带来了很多不便和困扰，但请您相信，我们会不遗余力

 Public @ 2023-05-31 19:50:22

网站改版工具升级版上线—支持所有改版形式

上海城市网2011年11月15日报道(内发实习生 刘琪)自从web重构以来，有许多网站表示他们正在升级网站的页面，所以今天是一个特殊的日子，网站的改版工具发布了一款升级版，支持所有改版形式！ 据了解，该升级版集成了前端开发技术，能很好地支持网页重构，移动端开发，网站安全与优化，以及响应式布局等，使得网站在使用该工具的情况下，就能够更好地实现改版，让用户在浏览网站时更加舒适！ 此外，新版本还

 Public @ 2023-02-25 11:54:31

搜索结果的标题摘要或缩略图展现异常怎么办？

如果搜索结果的标题摘要或缩略图展现异常，你可以尝试以下几种方法： 1. 刷新页面：有时候搜索引擎的缓存可能会导致标题摘要或缩略图无法正常展现，刷新页面可以解决这个问题。 2. 检查网站代码：如果搜索结果的标题摘要或缩略图在其他搜索引擎中能够正常展现，那么可能是网站代码的问题。你可以检查代码是否正确，是否有错误或缺失。 3. 提交反馈：如果以上两种方法都没有解决问题，你可以尝试提交反馈给搜索引

 Public @ 2023-04-23 12:00:14

更多您感兴趣的搜索

0.493322s