蜘蛛搜索引擎(蜘蛛搜索引擎在线)

张工 2022-05-26 18:17:12 阅读:72
  

什么是搜索引擎的蜘蛛

  也可以叫网络爬虫。

  网络爬虫(Web crawler,又称网络蜘蛛、网络机器人,在FOAF社区更常被称为web chaser)是一种按照一定规则从万维网上自动抓取信息的程序或脚本。其他不常用的名称有蚂蚁、自动索引、模拟器或蠕虫。互联网发展初期,网站相对较少,查找信息也比较容易。然而,随着互联网的爆炸式发展,普通网民要找到自己需要的信息就像大海捞针。这时,专业搜索网站应运而生,以满足公众信息检索的需求。现代搜索引擎的鼻祖是1990年蒙特利尔大学学生艾伦艾姆塔奇发明的阿奇。虽然当时万维网还没有出现,但是网络中的文件传输相当频繁,而且由于大量文件分散在各种零散的ftp主机中,查询起来非常不方便,于是艾伦艾姆塔奇想到开发一个可以按文件名搜索文件的系统,于是阿奇应运而生。阿奇的工作原理非常接近现在的搜索引擎。它依靠脚本程序自动搜索在线文件,然后索引相关信息,供用户用一定的表达式进行查询。因为archie很受用户欢迎,并受其启发,美国内华达州的系统计算服务大学在1993年开发了另一个非常相似的搜索工具。然而,此时的搜索工具除了索引文件之外,已经能够搜索网页。当时“机器人”这个词在程序员中非常流行。“计算机机器人”是指能够以人类无法达到的速度连续执行某项任务的软件程序。因为专门用于信息检索的“机器人”程序像蜘蛛一样在网络上爬行,所以搜索引擎的“机器人”程序被称为“蜘蛛”程序。

蜘蛛搜索引擎

什么是搜索引擎蜘蛛

  网络爬虫(Web crawler,又称网络蜘蛛、网络机器人,在FOAF社区更常被称为web chaser)是一种按照一定规则从万维网上自动抓取信息的程序或脚本。其他不常用的名称有蚂蚁、自动索引、模拟程序或蠕虫。互联网发展初期,网站相对较少,查找信息也比较容易。然而,随着互联网的爆炸式发展,普通网民要找到自己需要的信息就像大海捞针。这时,专业搜索网站应运而生,以满足公众信息检索的需求。现代搜索引擎的鼻祖是1990年蒙特利尔大学学生艾伦艾姆塔奇发明的阿奇。虽然当时万维网还没有出现,但是网络中的文件传输相当频繁,而且由于大量文件分散在各种零散的ftp主机中,查询起来非常不方便,于是艾伦艾姆塔奇想到开发一个可以按文件名搜索文件的系统,于是阿奇应运而生。阿奇的工作原理非常接近现在的搜索引擎。它依靠脚本程序自动搜索在线文件,然后索引相关信息,供用户用一定的表达式进行查询。因为archie很受用户欢迎,并受其启发,美国内华达州的系统计算服务大学在1993年开发了另一个非常相似的搜索工具。然而,此时的搜索工具除了索引文件之外,已经能够搜索网页。当时“机器人”这个词在程序员中非常流行。“计算机机器人”是指能够以人类无法达到的速度连续执行某项任务的软件程序。因为专门用于信息检索的“机器人”程序像蜘蛛一样在网络上爬行,所以搜索引擎的“机器人”程序被称为“蜘蛛”程序。

二维码