Qu'est-ce que le Crawl Budget ?

Définition complète

Le crawl budget est la combinaison de la fréquence de crawl (combien de requêtes Googlebot fait sans surcharger votre serveur) et de la demande de crawl (combien de vos pages Google veut explorer). Les pages de faible qualité, les duplicats et les erreurs gaspillent votre crawl budget.

Pourquoi c'est important pour le SEO

Pour les petits sites (<1000 pages), le crawl budget est rarement un problème. Pour les grands sites, un crawl budget mal optimisé signifie que vos pages importantes ne sont pas crawlées assez souvent. Bloquer les pages inutiles dans robots.txt aide.

Termes reliés