搜索引擎蜘蛛的由来(Sol蜘蛛引擎)

搜索引擎的发展推动了社会的进步，可以说，在互联网发展的过程中，搜索引擎给我们的生活带来了极大的便利。过去在搜索引擎市场中，微软和网景（Netscape）占据了统治地位。但对于浏览器早期的发展，你又了解多少呢？

Archie and Veronica

第一个互联网搜索引擎是1990年在蒙特利尔麦吉尔大学创建的Archie。Archie是“archive”的衍生词，因为当时Archie浏览器的主要工作就是索引基于文件传输协议（FTP）的档案。

两年后，Archie精神由史蒂文·福斯特（Steven Foster）和弗雷德·巴里（Fred Barrie）继承，在内华达大学的创建了Veronica。Veronica不是使用的FTP，而是基于当时流行的TCP / IP协议Gopher。

Gopher可以与90年代初期的Tim Berners-Lee的HTTP和广域信息服务器（WAIS）协议相媲美，直到HTTP成为最受欢迎的选择。

WebCrawler

最早的搜索引擎是WebCrawler，它是由布赖恩·平克顿（Brian Pinkerton）创建的。平克顿是华盛顿大学分子生物技术和计算机科学研究员，也是史蒂夫乔布斯公司NeXT的职员。

最早的WebCrawler引擎是使用超链接到网站的数量来确定站点应显示在搜索结果中的排名。

1994年，平克顿发现与WebCrawler最相关的网站是CERN。这一事实是CERN的一个非常成功的万维网项目。

WebCrawler的普及也归功于它的易用性。WebCrawler只通过一个简单的HTML界面实现，是第一个非常适合大众市场的引擎。

WebCrawler在四月份上线，七个月后，“核武器设计与研究”的访问成为了这个网站的第一百万记录请求。

平克顿于1995年6月以100万美元的价格将WebCrawler卖给了AOL。

Lycos

1994年，卡耐基梅隆大学的迈克尔·迈尔丁博士获得了国防部高级研究计划局（DARPA）的资助。

基于自身对网络的兴趣，他把自己的研究项目命名为狼蛛家族，因为他打算复制狼蛛搜寻猎物而不是等待被网络捕获的能力。

Mauldin的灵感来源于WebCrawler，但其中包含了具有开创性的算法，如分析超链接的锚文本，更好地理解页面的含义等。

Lycos奠定了率先使用超链接作为确定主机网页与用户搜索查询相关性的基础。

AltaVista

AltaVista搜索引擎是由Paul Flaherty、Louis Monier和Michael Burrows 在Digital Equipment Corp（DEC）联合创建的。

其中一些细节至今被人们称为传奇，其中最着名的就是搜索引擎的创建，这展示了DEC的Alpha处理器的巨大能力。

AltaVista是一个了不起的技术，其他早期的搜索引擎只能识别一小部分网络上的最新内容，而AltaVista使用了一千个网络并行工作返回非常接近万维网的完整索引的结果。

但由于许多有缺陷的业务决策，AltaVista未能发觉自己全部的潜力。

Inktomi / HotBot

Eric Brewer和Paul Gauthier于1995年在加州大学伯克利分校开发了Inktomi网页搜索引擎。

Inktomi这个名字来源于平民印第安人的神话般的蜘蛛，这个蜘蛛以将文化带给人们而闻名。

Inktomi公司成立于1996年2月，采用并行处理技术提供高性能搜索。

该大学计算机科学助理教授埃里克·布鲁尔博士表示：“我们的引擎是唯一能够随着互联网指数增长而扩展的引擎，因此Inktomi始终能够提供整个网络给数百万的用户——而不仅仅是我们认为的信息子集。通过将超级计算带入互联网，我们能够为用户提供最相关、最及时和最完整的信息，并且不会牺牲速度和硬件成本。”

Inktomi与HotWired Ventures LLC合作后，将数据库技术用于HotBot搜索引擎。“Wired”杂志于1996年5月向读者推出了Hotbot搜索引擎。Lycos在1998年收购了HotBot。

雅虎——搜索门户之王

注 ： 杨致远

90年代中期，雅虎、AltaVista、Excite和WebCrawler等网站通常被消费者用作寻找有趣的网站，这些网站被称为Web门户网站，重点是可以轻松地找到任何东西。

杨致远1978年从台湾移居美国后，以美国人杰瑞的名字命名。在皮埃蒙特山高中，他是数学中最有才华的学生，在数学测验中他的成绩总是非常好。

注：David Filo

David Filo于1989年在斯坦福遇到了Jerry Yang，两个人很快成为了好朋友。他们都对体育、数学和工程非常感兴趣。1993年底，两人开始在一个可以组织互联网站点的网站上工作。

在校园的一个预告片中，两人制作了“Jerry和David的万维网指南”来跟踪他们在互联网上的个人兴趣。这是互联网上的第一个目录服务之一。

几个月后，他们将其改名为雅虎。Filo和杨曾经说过雅虎代表“另一个层次有序的甲骨文”，但他们选择这个名字纯粹是因为他们喜欢雅虎的“粗鲁和朴素”的定义。

值得一提的是，雅虎引导网站用户感兴趣的网页内容的初始方法是不同的：他们聘用了一个编辑团队，选择将网站的按照字母顺序排序的目录。

雅虎迅速成为网络上最受欢迎的网站之一，培育了数千用户密切联系的互联网社区。Filo和杨没有钱在网站上做广告，口耳相传却给了他们免费的广告。

斯坦福大学的官员礼貌地要求他们找到一家愿意并且适合托管计算密集型服务的公司。Filo和Yang很快就同意与Marc Andreessen达成协议，将其软件托管在Netscape的高性能计算机上。

1995年3月，Filo和杨与数十名硅谷风险投资者会面。由于Filo和杨尚未想出一个可行的商业模式，大多数投资者都没有兴趣承担这样的风险。然而，红杉资本的迈克尔·莫里茨认为，潜在的收益已经是一种足够冒险的投资了，并同意为雅虎提供资金。1995年4月，莫里茨初步为雅虎投资近200万美元。

斯坦福大学的一名学生Tim Brady也加入了他们的商业计划，并且很快就为网站投放了广告。

雅虎的“What’s Cool”页面有能力制作，甚至可能打破互联网网站。1995年7月16日，亚马逊网站启动，这个公司迅速引起了杨的注意，他立即通过电子邮件向Jeff Bezos发送邮件，表示愿意与他们建立合作。

亚马逊的创始人贝佐斯认为“这就像是从消防水管中吸了一口水。”，最终他认为这是一个非常好的机会，于是决定与雅虎建立合作。事实证明，这是一个正确的决定，几天之内，亚马逊的订单的增长比例就超过了1000％！

Koogle

斯坦福大学另一位的毕业生Tim Koogle那时已经成功经营了一家公司，但却被这个新兴的搜索引擎投资所吸引。1995年7月，他成为雅虎首位首席执行官。

他的第一个决定之一就是把Netscape硬件托管的软件转移到内部。他这样做的原因是，他不像Filo和Yang认为Netscape是潜在的竞争对手。

按字母顺序排列的列表永远不可能是全面的，并且无法跟上Web上变化的加速步伐。Filo和Yang意识到他们需要在网站上添加一个搜索工具，并要求Koogle提供意见。Koogle认为，开发自己的技术太昂贵，太过分散其他的业务目标。所以雅虎应该与合作伙伴一起提供搜索功能。

最初，雅虎搜索采用了OpenText技术，但公司很快转而与AltaVista合作。作为协议的一部分，AltaVista同意不再将技术提供给搜索市场上的任何其他竞争对手。

1996年雅虎首次公开募股（IPO）筹集3500万美元，股价在交易首日上涨了两倍，市值达到了10亿美元。

随后雅虎的许多新部门兴起。雅虎财经提供了财经新闻、股票报价和新闻稿的发布。

1998年雅虎已经被选为第三年的最佳搜索引擎，目前雅虎的业务已不仅仅局限于搜索。

斯坦福效应

像雅虎一样，Google也是由两名学生创建的。

而这些还远远不是硅谷唯一一家在这所大学孵化成长起来的大型硅谷公司。一个鲜为人知的事实是Sun（微系统公司）代表斯坦福大学网络。Hewlett Packard和Logitech也是与斯坦福有联系的成功案例。

斯坦福大学总裁约翰·轩尼诗说：“我们有一个促进创业和冒险研究的环境。在这样的环境中，人们总是想办法解决最前沿的问题。“另一个因素是这个地区有许多风险投资家，斯坦福大学的学生和教授都比其他学生更容易获得资助金。

1996年1月，计算机科学系迁入以威廉·盖茨命名的新大楼。虽然盖茨从来没有去过斯坦福，但是当他捐出600万美元用于投资这个行业的时候，他的命名权得到了同意。

本文链接：https://www.24zzc.com/news/169337920226346.html