Article mis à jour le 01/09/2023. Comment s’appelle le processus qu’utilisent les moteurs de recherche pour extraire et évaluer les mots des pages web afin de pouvoir répondre aux requêtes des internautes ? Cet article de blog cherche à répondre à cette question.
Dans cet article :
- Le crawling est le processus qu’utilisent les moteurs de recherche pour extraire et évaluer les mots des pages web afin de pouvoir répondre aux requêtes des internautes
- Qu’est-ce qu’un robot d’exploration ? C’est quoi le crawling ?
- Qu’est-ce que le rendu ?
- Quelle est la différence entre le crawling et l’indexation ?
- Comment vérifier les problèmes d’exploration et d’indexation
Le crawling est le processus qu’utilisent les moteurs de recherche pour extraire et évaluer les mots des pages web afin de pouvoir répondre aux requêtes des internautes
Les moteurs de recherche comme Google doivent cataloguer rapidement et efficacement l’ensemble de l’Internet. Sa taille et sa portée sont immenses. Combien y a-t-il de sites Web et de pages ?
Google explore des milliards de pages. Google a exploré plus de 130 000 milliards de pages en moins de 4 ans. Découvrir toutes ces pages est un exploit incroyable. En crawlant de nouvelles pages, trouver de nouvelles pages qui suivent les liens devient un processus appelé crawling.
Un robot d’exploration Web est un programme informatique qui suit tous les liens d’une page vers de nouvelles pages ; il continue à le faire jusqu’à ce qu’il n’ait plus de nouveaux liens à suivre ou de pages à explorer. Différents noms sont donnés aux robots d’indexation Web : robots, araignées, robots des moteurs de recherche ou simplement « bots » en abrégé.
Qu’est-ce qu’un robot d’exploration ? C’est quoi le crawling ?
Lors du démarrage du processus d’exploration, Google utilise généralement une liste de sites Web de confiance pour commencer. Ces sites Web ont tendance à créer des liens vers de nombreux autres sites Web encore inconnus. Google utilise également des sitemaps et des sites Web qu’ils ont vus lors d’explorations précédentes. une exploration constante est nécessaire pour les recherches Internet d’un moteur de recherche.
Cela ne finit jamais. Les moteurs de recherche réfléchissent soigneusement aux pages à inclure dans leurs résultats. Ils ne veulent pas perdre leur temps ou leurs ressources sur des pages qui ne sont pas des candidats valables pour un résultat de recherche.
Au lieu de cela, ils souhaitent concentrer leurs efforts sur la recherche de pages nouvelles ou mises à jour susceptibles de répondre aux critères d’inclusion. Google considère le nombre de pages explorées comme une priorité.
Qu’est-ce que le rendu ?
Les navigateurs Web montrent directement aux utilisateurs le processus de rendu, qui consiste à interpréter leurs codes HTML, CSS et JavaScript pour créer une représentation visuelle de la page.
Google peut comprendre le code HTML et traiter ses graphiques à l’aide de ressources informatiques. Tout ce qui s’appuie sur JavaScript pour afficher les pages doit utiliser une grande puissance de traitement.
Pour cette raison, Google ne peut pas traiter et afficher les pages qui reposent sur JavaScript. Au lieu de cela, ces pages entrent dans une file d’attente de priorisation.
Les grands sites Web avec beaucoup de contenu de page nécessitent beaucoup de temps pour indexer les pages nouvelles ou mises à jour. Il est recommandé de produire des pages en HTML au lieu de JavaScript pour indexer plus rapidement. Si votre site nécessite Javascript pour afficher la sortie, l’indexation de nouvelles pages peut prendre beaucoup de temps.
Quelle est la différence entre le crawling et l’indexation ?
Le Crawling est la découverte de pages et de liens qui mènent à plus de pages. L’indexation consiste à stocker, analyser et organiser le contenu et les connexions entre les pages. Certaines parties de l’indexation aident à informer sur la façon dont un moteur de recherche explore.
Si votre site Web est surchargé d’erreurs ou de pages de mauvaise qualité, Google pourrait avoir l’impression que le site est principalement constitué de pages indésirables inutiles. Les erreurs de codage, les paramètres CMS ou les pages piratées peuvent envoyer Googlebot vers des pages de mauvaise qualité. Lorsque la mauvaise qualité l’emporte sur les pages de haute qualité sur un site Web, les classements de recherche en souffrent.
Comment vérifier les problèmes d’exploration et d’indexation
Vous pouvez voir comment Google indexe votre site Web avec la commande « site : » – un opérateur de recherche spécial. Entrez ceci dans le champ de recherche de Google pour voir toutes les pages qu’ils ont indexées sur votre site Web :
site:votredomaine.com
Vérifiez que les titres et les descriptions sont indexés de manière à offrir la meilleure expérience. Assurez-vous qu’il n’y a pas de pages inattendues, étranges ou quelque chose d’indexé qui ne devrait pas l’être.
Google search console est un outil qui vous permet d’obtenir les performances de recherche des pages de votre site. Cela vous donnera une idée de comment Google effectue sont processus de crawling et d’indexation.
Liens internes et externes
- Qu’est ce que google search console : Website blog.hubspot.fr
- Qu’est ce que le crawling : Website www.definitions-seo.com
- Exemple de recherche avec google : Website 128mots.com
- Recherche sur le blog : Website 128mots.com