什么叫搜索引擎蜘蛛

搜索引擎的历史并不长，但搜索引擎为互联网所作出的巨大贡献却显而易见，搜索引擎改变了世界，改变了用户的使用习惯，让我们对互联网的未来充满信心。 　　搜索引擎起步的时候做的并不好，第一个搜索引擎甚至没有分析网页的副本，而且没有排名的标准，为了深度挖掘商业潜力，这才推动搜索引擎渐渐发展，研发更先进的系统。 　　第一个比较大的商业搜索引擎是在美国的斯坦福大学，它在2001年花65亿美元购买了@主页...