每一条搜索结果从产生到被搜索引擎展现给用户,都需要经过四个过程:抓取、过滤、建立索引和输出结果。
抓取
Baiduspider,或称百度蜘蛛,会通过搜索引擎系统的计算,来决定对哪些网站施行抓取,以及抓取的内容和频率值。搜索引擎的计算过程会参考您的网站在历史中的表现,当您的网站产生新内容时,Baiduspider会通过互联网中某个指向该页面的链接进行访问和抓取,对于已被抓取过的内容,搜索引擎会对抓取的页面进行记录,并依据这些页面对用户的重要程度安排不同频次的抓取更新工作。
过滤
互联网中并非所有的网页都对用户有意义,有些网页对用户、站长和百度来说,都没有足够的价值,因此百度会自动对这些内容进行过滤。
建立索引
百度对抓取回来的内容会逐一进行标记和识别,并将这些标记进行储存为结构化的数据,同时,也会将网页中的关键词信息进行识别和储存,以便与用户搜索的内容进行匹配。
输出结果
用户输入的关键词,百度会对其进行一系列复杂的分析,并根据分析的结论在索引库中寻找与之最为匹配的一系列网页,按照用户输入的关键词所体现的需求强弱和网页的优劣进行打分,并按照最终的分数进行排列,展现给用户。
以上就是百度搜索引擎工作的全过程。说起来简单,实际上这是一件很复杂的事情,其中涉及很多精密的算法。