很多人都为搜索引擎的收录而烦恼，为自己的网站排名而忧虑，都希望自己的网站蜘蛛每天都拿抓取，网站的排名都能在百度googel的首页来吸引客户的眼球，而获得很多订单。下面我们讨论下搜索引擎的工作原理:
　　搜索引擎分工作分为三个部分。包括爬取网页程序，索引数据库，从索引数据库调用数据
　　第一步：搜索引擎抓取互联网的网页。
　　抓取网页的程序我们称之为“蜘蛛”，我们长说的“百度蜘蛛”、“google蜘蛛”就是指的百度、谷歌的爬取程序。搜索引擎蜘蛛会按照你的URL进行爬取。每当搜索蜘蛛爬取一个网页的时候他看到一个新的URL就会顺着这个URL爬下去。他会把爬取的内容返回到搜索引擎的索引数据库。
　　蜘蛛的主要作用就是爬取，蜘蛛爬取的是网站程序的代码。
　　第二步：程序爬取的内容返回到索引数据库。
　　索引数据库对网页信息进行处理，（包括网页所在URL、编码类型、页面内容包含的所有关键词、关键词位置、生成时间、大小、与其它网页的链接关系等）。
　　网页分析之后， 会对网页进行评价。
　　如果是网上重复度太多的内容，索引数据库则舍弃这个网页。
　　每个被收录的网站都会在搜索引擎的索引数据库中有相应的储存，我们在可以直接看到的 就是百度快照。 搜索引擎是按照他的索引数据库上的信息对网站进行排序的。
　　索引数据库中 还包含每个网站的导入链接 导出链接等信息。
　　第三步：索引数据库中排序
　　当用户输入一个关键词或者是一句话的时候,搜索引擎首先分析这个词或者这句话 ,他会对用户输入的关键词进行分词,然后在索引数据库中 进行相应的关键词排序结果输出。
　　了解搜索引擎的工作原理后，都清楚知道的网站为什么没有被告收录，或是收录得比较少，甚至是被搜索引擎拒绝收录的原因，而且大家都有自己的方案来吸引搜索引擎的青睐。