网页被百度收录后,蜘蛛还会再爬吗?(原创)
搜索网络资料,论坛里有些人说会。但是为什么会呢。而有些人像我这样还不太明白。到底有没有一个标准的答案呢?
我个人是这样思考的。首页,互联网信息是实时性的。这个可以肯定。举个例了:好比4年一次的奥运会,中国在拿了9面金牌,下1小时,甚至下1分钟,中国再得1面金牌。如果蜘蛛爬过新浪首页(新浪是一个大平台),N分钟,或者 N小时内之后再爬的话,互联网信息就不能实现实时性。开发搜索引擎的工作人员,会思考到这方面。否则的话,百度搜索引擎早晚会被网民淘汰。
所以,这个假设性的例子(其实也很实际)可以说明无论网址是否被百度收录,蜘蛛都会无条件爬取。
平常,有人说新浪是大平台高权重,所以蜘蛛经常爬。这样说也有道理。而小平台,权重不高蜘蛛就不会经常爬。SEO文章中也有说过,权重就好比一个人的身份地位一样。