11111111111

技术基础搜索引擎依托于多种技术，如网络爬虫技术检索排序技术网页处理技术大数据处理技术以及自然语言处理技术等这些技术共同构成了搜索引擎的核心功能核心模块搜索引擎技术的核心模块主要包括爬虫索引检索和排序分类从功能和原理上，搜索引擎大致被分为全文搜索引擎元搜索引擎垂直搜索。

工作原理 爬行和抓取 搜索引擎派出一个能够在网上发现新网页并抓文件的程序，这个程序通常称之为蜘蛛Spider搜索引擎从已知的数据库出发，就像正常用户的浏览器一样访问这些网页并抓取文件搜索引擎通过这些爬虫去爬互联网上的外链，从这个网站爬到另一个网站，去跟踪网页中的链接，访问更多的网页，这个。

在搜索引擎分类部分我们提到过全文搜索引擎从网站提取信息建立网页数据库的概念搜索引擎的自动信息搜集功能分两种一种是定期搜索，即每隔一段时间比如Google一般是28天，搜索引擎主动派出quot蜘蛛quot程序，对一定IP地址范围内的互联网站进行检索，一旦发现新的网站，它会自动提取网站的信息和网址加入自己的。