Exploration (crawl)

Aussi appelé: Crawl, Googlebot, robot d'exploration, crawler

Mis à jour 9 novembre 2026

L'exploration, ou crawl, est la façon dont Google trouve et télécharge des pages : un programme automatique appelé Googlebot visite les adresses qu'il a découvertes, surtout grâce aux liens et aux sitemaps, et récupère leur texte, leurs images et leurs vidéos.

Pourquoi c'est important pour un petit site

Google ne peut lire le contenu d'une page qu'en l'explorant, et ce n'est qu'ensuite qu'il décide de l'indexer ou non. Il trouve la plupart des nouvelles pages en suivant les liens de pages qu'il connaît déjà, et d'autres grâce au sitemap que vous envoyez. Une page vers laquelle aucun lien ne pointe passe facilement inaperçue.

L'essentiel de l'exploration est fait par Googlebot Smartphone, car pour la plupart des sites Google indexe surtout la version mobile.

Ce qui empêche l'exploration

Des problèmes de serveur : le site ne répond pas, ou mal, quand Googlebot passe.
Une règle du fichier robots.txt qui bloque la page ou tout le site.
Des pages qui ne s'ouvrent qu'après connexion.
Aucun lien vers la page et aucune entrée dans le sitemap : Google ne découvre jamais l'adresse.

Comment vérifier vos pages

Notre guide sur Détectée, actuellement non indexée traite des pages que Google connaît mais n'a pas encore explorées. Pour une page donnée :

Dans la Search Console, saisissez l'adresse complète de la page dans la barre de l'outil d'inspection d'URL, en haut.
Lisez les détails de l'exploration : Dernière exploration indique le dernier passage de Googlebot, Exploration autorisée ? si le robots.txt le laisse entrer, et Récupération de page si votre serveur a bien livré la page.
Cliquez sur Tester l'URL active pour que Google essaie de lire la page tout de suite. Si le résultat signale un blocage ou une erreur du serveur, vous savez quoi corriger.

Souvent confondu avec

Indexation
L'exploration, c'est Googlebot qui télécharge la page. L'indexation est l'étape suivante : Google l'analyse et décide s'il l'enregistre. Une page peut être explorée sans être indexée.

Questions fréquentes

›À quelle fréquence Googlebot passe-t-il sur mon site ?

Il n'y a pas de calendrier fixe. L'outil d'inspection d'URL indique quand Google a exploré chaque page pour la dernière fois, et Google précise que ses accès sont en moyenne espacés de plusieurs secondes.

›Puis-je empêcher Googlebot d'explorer une page ?

Oui, avec une règle dans le robots.txt. Cela bloque l'exploration, pas l'affichage : Google indique qu'une adresse bloquée peut quand même apparaître dans les résultats. Pour écarter une page, utilisez noindex.

›Peut-on payer Google pour être exploré plus souvent ?

Non. Google indique qu'il n'accepte aucun paiement pour explorer un site plus fréquemment ou améliorer son classement.

Sources

Google Search Central Guide détaillé de la recherche Google
Google Search Central Présentation de Googlebot
Aide Search Console Outil d'inspection d'URL