Le crawl budget (également connu sous le nom de budget d’exploration pour les amoureux de la langue française) correspond au temps alloué par Google pour explorer votre site.
Même si Google s’appuie sur une armée de robots qui ne travaille pas 35 heures, ces robots n’ont qu’un temps limité pour crawler un site.
Un des enjeux forts d’une action de référencement naturel sera d’augmenter le crawl budget. Plus votre crawl budget sera élevé, plus vos nouveaux contenus seront rapidement pris en compte et plus vous aurez de chances de remonter dans les premiers résultats (même s’il n’y a pas de lien de causalité entre crawl budget et positionnement. Un crawl budget qui augmente matérialise le respect de critères techniques et l’ajout régulier de nouveaux contenus, 2 des piliers d’une action SEO).
L’idée est donc de disposer d’une structure technique et éditoriale qui facilite le travail de crawl des robots :
- Optimiser la vitesse d’exploration, notamment de temps de chargement des pages. Effectivement, la durée de chargement des contenus et le nombre de pages analysées sont très liés. Si ce délai augmente, le nombre de pages crawlées baisse, et inversement.
- Augmenter la fréquence de mise à jour de vos pages. Plus vous créez et ajustez vos contenus, plus vous incitez les robots à venir sur votre site.
- Améliorer la structure de votre site et son architecture. Une arborescence simple et un maillage interne optimisé facilitera la navigation des robots qui iront plus vite.
En résumé, plus vous faciliterez le travail de crawl des robots, plus ils vous le rendront bien en revenant plus souvent sur votre site et en améliorant votre positionnement !