收录量为什么会突然大量增加？

aizaipiao · 发表于 2011-8-19 11:51:04

我今天早上按照往常一样一开电脑就查了一下我的收录，外链，快照等各方面的数据。

发现我的站的收录突然多了45000收录。但外链，没什么变化。这是什么情况呀,想了好久也没弄个明白。收录从187000多一下子到了233000，之前就被抓取了没有放出来，刚好今天被放出来了。也没这么猛呀？

后来问了之首大哥。他给我分析了下说：

这个情况我在谷歌也遇到过

因为当时我的站点有几种 url格式都可以访问同一个页面

所以谷歌就疯狂的收录我所有的url形式

后来用 robots.txt文件禁止了除html文件意外的格式慢慢就恢复了

收录是这样的一个过程：先抓取，在分析，然后放出来

不是说你昨天发外链才导致今天收录猛增的

而是网站之前就被抓取了可能没有放出来

刚好今天被放出来了

所以就猛增

另外不排除百度出错

在这里谢谢之首大哥。非常感谢！！！