Google 的蜘蛛们多久就可以遍历一次 Internet ？
2012-01-19 17:52:52   来源：   点击：

4 个答案

• 答案 1：

  1、这个问题本来就不成立。internet是活的，每时每刻都在增加新的网页，怎么能绝对遍历？ 2、每个搜索引擎都有自己分级的网站列表，比如新浪新闻，可能十分钟抓一次，新浪微博，五分钟一次。如果一个新网站马上上线，没有什么过硬的外链，可能直到你死搜索引擎都不来。

• 答案 2：

  爬虫不是通过遍历internet的方法来更新数据的 对于不同权重的网站爬虫更新频率不同 同时，有些新出现的网页，是由外链引用或者其他网页跳转的方式被发现的，也不一定是由爬虫发现的。 这个问题如果深究就是google的核心算法了，不好一概而论的。

• 答案 3：

  Google蜘蛛是并行的，大致得1-2天吧，虽然没有特别的统计它，只是估算。 一个新域名做的网站，在一个更新频度一般的网页放一个链接，1-2天内即可发现Google蜘蛛来过。

• 答案 4：

  楼上两位已经说的很好了。 如果非得说遍历这个词，那从Google出生到Google死掉，应该是完整的一次遍历。