Définition
Le crawl est l'exploration de votre site par les robots de Google (appelés Googlebot ou "spiders") qui visitent vos pages pour les analyser.
Explication détaillée
Google dispose d'un "budget de crawl" limité pour chaque site. Si votre site est lent, mal structuré, ou contient trop de pages inutiles, Google n'explorera pas toutes vos pages importantes. Optimiser le crawl passe par un bon maillage interne, un sitemap à jour, et un site rapide.
Exemple concret
Googlebot a crawlé 150 pages de votre site cette semaine selon Google Search Console.
Bonnes pratiques
- Améliorez la vitesse de votre site pour que Google puisse crawler plus de pages.
- Supprimez ou bloquez les pages inutiles qui gaspillent le budget de crawl.
- Créez une architecture de site plate (toutes les pages à 3 clics maximum).
- Surveillez les statistiques de crawl dans Google Search Console.
Erreurs courantes à éviter
- Avoir des millions de pages de filtres/tri qui gaspillent le crawl budget.
- Laisser des chaînes de redirections qui ralentissent le crawl.
- Avoir un serveur lent qui limite le nombre de pages crawlées.
- Créer des boucles infinies avec des paramètres d'URL.
Termes associés
Autres termes : Technique
Passez de la théorie à la pratique
Maintenant que vous comprenez ce qu'est le/la Crawl, analysez votre site pour voir comment l'améliorer.
Analyser mon site gratuitement