Question centrale : comment Google, Bing et les IA découvrent-ils et comprennent-ils mon site ?
Objectifs du module
- Vérifier si une page est indexée, et comprendre pourquoi elle ne l'est pas.
- Mener un audit technique de base.
- Lire un fichier robots.txt et connaître les robots des IA.
- Comprendre pourquoi être accessible ne suffit pas pour être cité.
Atelier
Activité 1 : votre site est en ligne. Est-il dans Google ?
- Tapez
site:votre-sous-domaine.domaine.frdans Google. Combien de pages apparaissent ? - Ouvrez Google Search Console :
- l'inspection d'URL : collez l'adresse d'une page, et lisez son statut ;
- le rapport Pages : combien de pages indexées, combien non indexées, et pour quelle raison ;
- le rapport Sitemaps : votre sitemap a-t-il été lu ?
- Faites de même dans Bing Webmaster Tools.
- Le site continue de s'enrichir : à chaque nouvelle page fille publiée, demandez son indexation avec l'inspection d'URL, après avoir vérifié qu'elle est liée depuis sa rubrique et présente dans le sitemap.
Notion
De la découverte à l'indexation
- Découverte : le moteur apprend qu'une URL existe, grâce à un lien ou au sitemap. C'est pourquoi chaque page fille ajoutée doit être liée depuis sa rubrique et inscrite dans le sitemap.
- Crawl : un robot télécharge la page.
- Indexation : le moteur décide de garder la page dans son index.
Les fichiers et balises qui guident les robots :
- sitemap.xml : la liste des pages que vous souhaitez voir explorées ;
- robots.txt : les zones que les robots peuvent ou ne peuvent pas explorer ;
- canonical : l'adresse officielle d'une page, quand plusieurs URL affichent le même contenu.
| Code HTTP | Signification |
|---|---|
| 200 | La page fonctionne |
| 301 | Redirection définitive vers une autre adresse |
| 404 | Page introuvable |
Statuts fréquents dans Search Console pour un site neuf :
- « Détectée, actuellement non indexée » : Google connaît l'URL mais ne l'a pas encore explorée. C'est normal au début, surtout sans liens externes.
- « Explorée, actuellement non indexée » : Google a lu la page mais ne l'a pas retenue. Il la juge peut-être trop pauvre ou trop proche d'autres pages.
Atelier
Activité 2 : l'audit technique
Vérifiez pour votre site (vos coches sont mémorisées dans ce navigateur) :
Les outils nécessaires sont listés dans la boîte à outils.
Notion
Les Core Web Vitals
Google mesure l'expérience de chargement avec trois indicateurs :
| Indicateur | Ce qu'il mesure | Seuil « bon » |
|---|---|---|
| LCP (Largest Contentful Paint) | Temps d'affichage du contenu principal | 2,5 s maximum |
| INP (Interaction to Next Paint) | Réactivité aux clics et aux saisies | 200 ms maximum |
| CLS (Cumulative Layout Shift) | Stabilité visuelle (éléments qui « sautent ») | 0,1 maximum |
L'INP a remplacé l'ancien indicateur FID en mars 2024. Sur un petit site, PageSpeed Insights n'affiche souvent que des données de laboratoire (une simulation) : les données « terrain » demandent un volume minimum de visites.
Atelier
Activité 3 : les robots des IA peuvent-ils accéder à votre site ?
Ouvrez votre robots.txt. Quels robots sont autorisés ? Puis débattez : être accessible aux robots suffit-il pour être cité par une IA ?
Notion
Les robots des IA
| Robot | À quoi il sert |
|---|---|
| Googlebot | Explore le web pour Google Search, donc aussi pour les Aperçus IA et le Mode IA |
| Bingbot | Explore le web pour Bing, donc aussi pour Copilot et une partie de ChatGPT |
| OAI-SearchBot | Explore le web pour la recherche de ChatGPT |
| PerplexityBot | Explore le web pour Perplexity |
| Google-Extended | Règle l'utilisation de vos contenus pour entraîner Gemini. Le bloquer ne retire pas un site des Aperçus IA |
Le fichier llms.txt est une proposition récente pour guider les IA. Aucun effet n'est démontré à ce jour : c'est une expérimentation, pas une bonne pratique établie.
À retenir. Être accessible est une condition, pas une garantie. Pour être cité, il faut accessibilité + qualité de l'information + réputation + sources + contexte. La réputation est le sujet du module 6.
À déposer
Livrable du module 5
- L'audit technique et d'indexation : statut de chaque page, score PageSpeed mobile, validité des données structurées.
- Une liste de 3 à 5 correctifs, classés par priorité.