通用与专业

通用搜索引擎技术与专业搜索引擎技术在发展方向上表现出越来越多的差异。真正现代意义的搜索引擎，是伴随着互联网和超文本链接的应用而发生的。计算机自动搜集海量的网页，并对搜集到的网页建立索引信息库，用户通过向搜索引擎提交查询请求，查询请求通常以单个或多个关键词来表示，而获得即时响应的检索结果，具备全文检索功能。只有同时满足以上功能要求的搜索引擎，才能称之为真正的搜索引擎。

搜索引擎从一个默默无闻的网络工具在10多年内迅速窜升成为互联网上仅次于邮件的第二大应用，并成为今天的投资人最感兴趣的技术之一，其直接诱因是互联网内容的爆炸式增长。资料显示，1994年7月在卡内基梅隆大学诞生的第一个真正意义的互联网搜索引擎lycos，其最初收录索引的只有5.4万个网页，到今天全球影响力最大的搜索引擎google收录索引已超过80亿个网页，运行搜索引擎从最初的单台服务器到数以几十万计的服务器，依然跟不上互联网信息资源的增长速度，而且毫无疑问，今天的内容正在以前所未有的速度递增，这给我们进行内容的收集和整理带来了很大挑战。

搜索引擎的价值在于将传统的静态环境下的信息检索技术转移到动态、实时的网络环境中，并应用到互联网、外联网和企业内网的信息资源管理和信息利用中去，通过搜索引擎感知企业外部经营环境，进行信息资源开发、管理和利用，进而塑造企业竞争优势。今天，全球化和网络化对企业信息和知识资产的加工共享已经不只局限在提高生产率、有效整合企业资源、降低运营成本这些短期收益方面，更重要的是它已经涉及到企业的核心竞争力、生存力和综合实力的长远问题，已成为流淌在企业生产经营活动中的一种血液，成为另一种无形的生产要素。

搜索引擎的演进

搜索引擎的出现、发展和变化都不是一朝一夕得以完成的，追根溯源可以到最早的信息检索。

信息检索（informationretrieval）最早是由美国学者c.w.mooers在1949年提出，主要面向以印刷文献为检索对象进行手工检索。随着1946年世界上第一台计算机的问世，计算机化的信息检索逐渐取代了手工检索的主流地位。上个世纪70年代联机信息检索得到商业化应用而日渐流行，计算机化的联机信息检索以各类数据库为检索对象，并以联机服务中心等机构形式开展检索服务，从此信息检索用户开始由专业人员（或者检索中介）向个人用户转移。

1991年，xwais提供了一个界面友好的信息搜索系统，但是这个系统要求很特殊的文件格式。同年出现了另外一个美国明尼苏达大学信息检索系统gopher，成为当时最为流行的检索工具。1993年，美国国家超级计算应用中心ncsa推出第一个基于html语言图形化的浏览器mosaic，借此普通的用户可以轻松地使用互联网。1994年，美国网景公司推出支持html的浏览器netscape，这使得html格式的信息在网络上迅速膨胀，从而迎来了搜索引擎的真正发展。这年春天，卡内基梅隆大学的michaelmauldin将johnleavitt开发的网络蜘蛛程序（spider）与他自己开发的索引程序结合起来，创建了真正意义上的互联网搜索引擎lycos;同年，yahoo公司创立，它提供基于目录的信息检索服务开辟了搜索引擎的一个新时代。今天最赋盛名的google诞生于1999年2月，由斯坦福大学的larrypage等人推出，由于google可为世界各地的用户提供所需的搜索结果，而且搜索时间通常不到半秒，一经推出就很受用户欢迎。现在，google已经成为最著名的搜索引擎之一，索引的网页达到数十亿，每天提供数亿次查询服务。