Le crawl est l’exploration des pages d’un site par les robots des moteurs de recherche ou des IA, qui suivent les liens pour découvrir et analyser les contenus. Une page non crawlée ne peut pas être indexée.
« Retour vers le glossaire« Back to Glossary Index