1月份时，谷歌新的网站优化代言人Gary Illyes在谷歌官方博客上发了一篇帖子【网站排名优化推广】:搜索引擎蜘蛛抓取配额是什么
上图是网站优化天天一贴这种级别的小网站，页面抓取频次和抓取时间（取决于服务器速度和页面大小）没什么大关系，说明没用完抓取份额，不需要担忧。
有些时候，抓取频次和抓取时间是有某种对应关系的，如下图另一个大些的网站【网站排名优化推广】:搜索引擎蜘蛛抓取配额是什么
最上面的是抓取页面数，中间的是抓取数据量，除非服务器出错，这两个应该是对应的。最下面的是页面抓取时间。可以看到，页面下载速度够快，天天抓取上百万页是没问题的。
当然，像前面说的，能抓上百万页是一方面，搜索引擎想不想抓是其次。
大型网站另一个常常需要考虑抓取份额是什么原因，不要把有限的抓取份额浪费在无意义的页面抓取上，致使应该被抓取的要紧页面却没机会被抓取。
浪费抓取份额的典型页面有【网站排名优化推广】:搜索引擎蜘蛛抓取配额是什么
链接加nofollow不会浪费抓取份额。但在谷歌是会浪费网站权重的。 noindex标签不可以节省抓取份额。搜索引擎要了解页面上有noindex标签，就得先抓取这个页面，所以并不节省抓取份额。 canonical标签有时能节省一点抓取份额。和noindex标签一样，搜索引擎要了解页面上有canonical标签，就得先抓取这个页面，所以并不直接节省抓取份额。但有canonical标签的页面被抓取频率常常会减少，所以会节省一点抓取份额。抓取速度和抓取份额不是排名原因。但没被抓取的页面也谈不上排名。 作者: Zac@网站优化天天一贴版权是: 中新虚拟主机版权所有。转载时需要以链接形式注明作者和原始出处及本声明。网站优化整理推荐！网页名字【网站排名优化推广】:搜索引擎蜘蛛抓取配额是什么
