搜索引擎的发展，经历了第一代目录搜索，元搜索以及第三代网页搜索阶段，如图3-1所示。

图3-1　搜索引擎发展历史

所有搜索引擎的祖先，是1990年由蒙特利尔的McGill University三名学生发明的Archie（Archie FAQ）。Alan Emtage等想到了开发一个可以用文件名查找文件的系统，于是便有了Archie。Archie是第一个自动索引互联网上匿名FTP网站文件的程序，但它还不是真正的搜索引擎。Archie是一个可搜索的FTP文件名列表，用户必须输入精确的文件名搜索，然后Archie会告诉用户哪一个FTP地址可以下载该文件。

最早现代意义上的搜索引擎出现在1994年7月，是以Yahoo为代表的目录搜索引擎。如今，进入到了真正意义上的网页搜索。名副其实的搜索引擎按关键词检索。当用户以关键词查找信息时，搜索引擎会在数据库中进行搜寻，如果找到与用户要求内容相符的网站，便采用特殊的算法逻辑含义用图表示是：计算出各网页的相关度及排名等级，然后根据关联度高低，按顺序将这些网页链接返回给用户，例如：Google、百度等。