Découverte d’URL
Aussi : URL discovery
Étape par laquelle un moteur apprend l’existence d’une adresse, avant même de l’explorer : par un lien, un sitemap ou une soumission.
Google l’écrit : il n’existe pas de registre central des pages, et il doit chercher en permanence les nouvelles pour les ajouter à sa liste d’URL connues. Certaines le sont parce qu’il les a déjà visitées ; d’autres parce qu’il extrait un lien d’une page connue ; d’autres encore parce qu’un site lui soumet un sitemap. Découverte ne vaut pas exploration : le robot décide ensuite s’il demande l’URL, et quand.
Dans Search Console, l’inspection d’URL affiche une rubrique « Découverte » : les sitemaps où l’URL figure et la page d’origine que Google a peut-être utilisée pour la trouver. Le statut « Détectée, actuellement non indexée » décrit l’entre-deux : connue, pas encore explorée. Les éditeurs d’assistants IA, eux, ne documentent pas la façon dont leurs robots découvrent les URL ; un lien HTML présent dans la réponse du serveur reste la forme que tout robot peut suivre.
Le sujet, traité en entier
Source Google Search Central — In-depth guide to how Google Search works