想要真正做好SEO，首先就要了解搜索引擎的工作原理，通过分析其原理，掌握搜索结构，从而做好网站优化。网民在互联网上发出搜索请求，然后等待，最后得到其想要的搜索结果；在网民等待的过程中就是搜索引擎工作时间，搜索引擎中的探测系统被我们成为“蜘蛛”，蜘蛛在互联网上爬行，会抓取其中的网站，将网站分解、分析并以巨大表格的形式存入数据库后，把其信息建库，然后放入互联网的数据库中，在搜索请求发出后，搜索引擎会处理搜索请求，在数据库中找到相关信息，通过计算排列顺序
蜘蛛在整个互联网上爬行，抓取所看到的网站的URL，将URL提取出来，根据广度优先抓取和深度优先抓取的方式，筛选出合格的URL，合格不代表可以通过，蜘蛛会把抓取的页面进行筛选，过滤掉质量差和一些不合规定的页面，如果不符合则继续把URL加入到URL 队列中，如果符合收录就会下载网页内容。
全文搜索引擎是从网站提取信息建立网页数据库的概念。搜索引擎的自动信息搜集功能分两种。一种是定期搜索，即每隔一段时间(比如Google一般是28天)，搜索引擎主动派出"蜘蛛"程序，对一定IP地址范围内的互联网站进行检索，一旦发现新的网站，它会自动提取网站的信息和网址加入自己的数据库另一种是提交网站搜索，即网站拥有者主动向搜索引擎提交网址，它在一定时间内(2天到数月不等)定向向你的网站派出"蜘蛛"程序，扫描你的网站并将有关信息存入数据库，以备用户查询。
目录索引，顾名思义就是将网站分门别类地存放在相应的目录中，因此用户在查询信息时，可选择关键词搜索，也可按分类目录逐层查找。与全文搜索引擎相比，目录索引有许多不同之处。
元搜索引擎(MetaSearchEngine)不是一种独立的搜索引擎，它最显著的特点是没有自己的资源索引数据库，是架构在许多其他搜索引擎之上的搜索引擎。一般的元搜索引擎都包括三大功能结构:提问预处理子系统、检索接口代理子系统和检索结果处理子系统。
