蜘蛛是怎样爬取我们网站的页面?它是怎么样的一个原理呢?爬取了是不是就会被收录呢?现在我给大家做个详细解答。

首先说说什么是百度蜘蛛?就是我们给百度的网站爬取程序起的一个外号。有时候也叫爬虫或者机器人。因为百度的这个程序担当了类似于蜘蛛的功能。

蜘蛛是怎样爬取我们网站页面的呢? 我们打个比方,现实中我们为什么会有很多家庭失窃呢?因为他们平时很张扬不低调,穿金戴银,让小偷感觉到您有钱可取,有时候你不关门窗,门带关的,无形中不下了很多勾引小偷来的诱饵,让小偷接近我们或我们的家,以至于他撬开我们的门窗,拿走我们的东西。而百度蜘蛛呢也和小偷一样,通过众多的链接诱饵,来到我们的网站,然后偷取我们网站的内容,然后放到搜索引擎里去,这也就是百度为什么能收录我们的网页—蜘蛛偷取了我们的网页。那么我们怎么让蜘蛛更好,更快的来偷取我们的网页呢?很简单,我们需要布置大量的链接诱饵,让他觉得我们这有东西可取,勾引他过来。首先我们要把自己的网站暴露给百度,怎么去暴露呢??到百度网站提交入口去提交我们的网站,然后在放置链接诱饵,大家应该都钓过鱼吧!!!这诱饵就像我们钓鱼用的鱼饵样,我要想想钓到鱼,我们就必须把鱼饵撒到鱼很多的小河或池塘里,同理,我们的链接诱饵也要放到百度蜘蛛经常去的地方才能让蜘蛛吃到我们的饵到我们网站来,那么蜘蛛经常去那些地方呢??高权重的网站,比如seo研究中心,a5,落伍者,百度知道,百度贴吧,百度hi,天涯等等……..我们写一篇 文章或发表一条评论在带上我们的网址,就放下一个饵,这些饵在短时间内不会给我们网站带来权重,也不会提升我们网站的排名,只能更好的吸引蜘蛛来我们的网站,促进我们的网站更好的被百度收录。还能增加我们网站的百度反向链接,当达到万,十万,百万的时候对我们的排名就会有很大帮助。蜘蛛就是这样通过链接爬到我们的站,爬到我们的网站后看有那些链接,包括内链接,外链接,然后又通过我们的外部链接爬到另外一个站,爬到另外一个站后又通过外部链接爬,不断反复,循环的爬就像蜘蛛样,在互联网这张网上爬来爬去的,所以我们叫它蜘蛛。

当蜘蛛爬取到我们的网页时是不是就会给收录呢?答案是否定的,它还要分析,看我们的这个网页是否符合收录的标准,因为互联网上的网页太多了,有上千万亿个页面,就是在大的服务器也会被装爆,不可能收录这么多。像重复的页面,内容质量低劣的垃圾页面就会被排挤掉,收录符合收录收录标准的页面。收录标准是什么呢?他需要通过程序判断,这个程序就会有一个关于收录标准的算法。我们都知道考试及格的标准就是我们要考到60分。要想网页被收录达到他的收录标准,我们要做好两方面,一是:网页内容的质量,二是:这个页面获得的链接。如果这个页面是网站的内页,链接一般来源于网站其他的内页,目录页,首页给他链接传递权重(网站的权重都是通过链接传递的)。给了页面权重后,搜索引擎就会对该页面的权重进行计算,看是否符合收录的标准,如果你这个页面的链接做的很好,能打50分,那么这个页面的内容只需要打十分就会被收录,如果您的网页内容写的极好给你满分50,但外链很差5分,也不会被收录,这也就是为什么有些人的内容质量不好却被收录,内容质量好的却没有被收录的原因。也许有些人会问你怎么知道百度要计算这些页面的权重,如果他不计算权重的话,他怎么会得出谁排第一,谁排第二呢?就像一个班的考试样,怎么会有第一名,第二名呢?因为他得到的分数是全班最多的。然后通过计算您网页的权重,您网页的权重越高,就排在越靠前的位置。我们只有把这些原理和思路注入到我们大脑里去才会便于以后在seo道路上的分析,一个seo者绝对是一个分析师。



原创文章如转载,请注明:转载自郑州网站优化,seo推广方案策划培训-翼虎seo学习博客
原文地址:http://www.qihow.com/blog/seo/166.html