最新更新章节：2019-03-04
关于百度以及其它搜索引擎的工作原理，其实大家已经讨论过很多，但随着科技的进步、互联网业的发展，各家搜索引擎都发生着巨大的变化，并且这些变化都是飞快的。我们设计这个章节的目的，除了从官方的角度发出一些声音、纠正一些之前的误读外，还希望通过不断更新内容，与百度搜索引擎发展保持同步，给各位站长带来最新的、与百度高相关的信息。本章主要内容分为四个章节，分别为：抓取建库；检索排序；外部投票；结果展现。
来源：百度搜索资源平台 百度搜索学堂
搜索引擎工作流程主要有数据采集、数据预处理、数据处理、结果展示等阶段。在各工作阶段分别使用了网络爬虫、中文分词、大数据处理、数据挖掘等技术。网络爬虫也被称为蜘蛛或者网络机器人，它是搜索引擎抓取系统的重要组成部分。网络爬虫根据相应的规则，以某些站点作为起始站点通过各页面上的超链接遍历整个互联网，利用URL弓I用根据广度优先遍历策略从一个html文档爬行到另一个html文档来抓取信息。中文分词是中文搜
百度搜索引擎工作原理大致如下： 1. 爬虫抓取网页：百度的爬虫程序会从互联网抓取网页并将其存入数据库中。 2. 预处理：百度对所有网页进行预处理，这个过程会去除无用信息、提取关键词、计算每个网页的PageRank等。 3. 查询处理：当用户输入关键词进行搜索时，百度会将查询处理成一组词条，并进行分类别处理，比如确定搜索意图是找资讯、图片、视频等。 4. 检索匹配：百度搜索引擎会对数据库中的
Spider抓取系统的基本框架互联网信息爆发式增长，如何有效的获取并利用这些信息是搜索引擎工作中的首要环节。数据抓取系统作为整个搜索系统中的上游，主要负责互联网信息的搜集、保存、更新环节，它像蜘蛛一样在网络间爬来爬去，因此通常会被叫做“spider”。例如我们常用的几家通用搜索引擎蜘蛛被称为：Baiduspdier、Googlebot、Sogou Web Spider等。Spider抓取系统是搜索
检索排序是指根据用户查询的关键词和相关度分数对文档进行排序，以便在搜索结果页面中将最相关和最相关的文档排在前面。百度搜索引擎使用了一种称为PBM（Probabilistic Boolean Model）的检索算法来衡量文档的相关性，以及PageRank算法来确定文档的权重和排名。 PBM算法将计算文档中包含用户搜索查询词的概率，并以此计算文档的相关度得分。这个概率是通过使用贝叶斯公式结合词频率、
