从谷歌加里Illyes写了题为什么抓取预算就意味着Googlebot在一篇博客文章。在书中，他解释了什么是爬行预算，抓取速度极限是如何工作的，什么爬行的需求是与哪些因素影响网站的抓取预算。
首先，加里解释说，对于大多数站点，爬行预算是不是担心。对于真正的大网站，成为东西？ 考虑看着。
“优先排序，以爬行的时候，有多少资源主办的网站可以分配给抓取服务器是更大的网站更重要的还是基于URL参数，那些自动生成的网页，什么”加里说。
这里是什么发表了简短的总结，但我建议你阅读全文后。
抓取速率限制是为了帮助谷歌不会抓取您的网页太多，太快，它伤害你的服务器。
抓取的需求是谷歌有多少要抓取的网页。这是基于网页的受欢迎程度如何，以及如何过时的内容在谷歌索引。
抓取预算“以抓取速度和抓取需求一起。“谷歌抓取预算定义为”网址Googlebot的数量可以和想爬。“
博客文章接着解释是什么因素影响爬行预算，然后提供关于这个专题的一些常见问题解答。