Wird vom Crawl-Budget gesprochen, so bezieht man sich auf die Mittel, die Google einsetzt, um eine Webseite zu crawlen. Das Budget kann anhand der Anzahl der gecrawlten Seiten oder der Zeit, die der Googlebot dafür benötigt, definiert werden.
Das Crawl-Budget variiert von Webseite zu Webseite und wird durch die Größe der Seite, die Anzahl an Backlinks und die Fehlerhaftigkeit der Webseite bestimmt.
Relevante Glossareinträge
Crawl-Budget Optimierung
Googlebot
Linkaufbau