Le crawl permet aux moteurs de découvrir et récupérer une URL ; l’indexation consiste ensuite à comprendre et conserver son contenu pour pouvoir l’afficher dans les résultats.