Voici des définitions à propos de 'crawl' figurant dans notre dictionnaire :
Deep Crawl et Fresh Crawl : Les différents processus d'analyse des pages web par Googlebot, le robot de Google.Pour recenser et aussi ajouter de nouveaux sites dans son indexe, Google parcourt ("crawl") le web en utilisant un robot appelé GoogleBot. Ce robot suit les ...
SiteMaps : Il s'agit d'un moyen pour le webmaster de décrire la liste des pages de son site qui doivent être indexées par Google. L'idée est de faciliter la tâche aux robots d'indexation de Google afin qu'ils indexent plus rapidement et efficacement les pages d...