Analyse de crawl

  • Corrigez les erreurs d’exploration qui bloquent l’accès des moteurs de recherche.
  • Vos contenus stratégiques parfaitement explorables et indexables
  • Des recommandations claires et actionnables
visualisation du crawl

Quelques clients

logo Bureaux Locaux
Logo gens de confiance
Logo Ecole française
Logo maison.fr
logo Propriétés Privées

Qu’est-ce que l’analyse de crawl en SEO ?

L’analyse de crawl est une partie spécifique de l’audit technique qui consiste à optimiser l’exploration du site par les moteurs de recherche en facilitant l’accès aux contenus stratégiques et en limitant l’accès aux contenus les moins pertinents pour eux.

Sur un site web, de nombreux contenus peuvent être à la fois pertinents pour les utilisateurs et peu utiles pour le référencement naturel. Grâce à un travail sur le maillage interne et en limitant l’accès à certaines pages on s’assure que les contenus les plus stratégies soient ceux explorés en priorité.

Pourquoi c’est important ?

À chaque passage sur un site internet, les moteurs de recherche disposent d’un « quota » de pages à explorer appelé « crawl budget ». Une fois ce quota épuisé, le moteur de recherche quitte le site. Plus un site sera mis à jour régulièrement, plus il aura de pages et plus il fera d’audience et plus le budget crawl sera élevé.

L’analyse de crawl vise à ce que ce crawl budget soit utilisé de la manière la plus rationnelle possible. On va alors guider le moteur de recherche vers les contenus les plus pertinents via le maillage interne ou des stratégie de non-indexation pour certaines pages.

Le processus d’analyse de crawl

Simuler le passage d’un moteur de recherche sur le site, repérer et corriger les erreurs qui empêchent l’exploration

1. Simuler la visite d’un moteur de recherche

Grâce à des outils d’exploration spécialisés (Screaming Frog SEO Spider, Xenu, DeepCrawl etc.), on peut simuler les passages de moteurs de recherche sur le site. On entre la première page à explorer (généralement la page d’accueil) et l’outil va aller explorer l’ensemble des pages accessibles grâce aux liens hypertextes tout en remontant de nombreuses informations utiles pour l’analyse.

2. Analyser les rapports de crawl

Une fois le crawl de l’outil terminé, les informations disponibles sont analysées pour identifier les erreurs potentielles :

  • Présence d’erreurs 404
  • Redirections 301, 302
  • Utilisation de JavaScript bloquant l’affichage du contenu
  • Pages inaccessibles, non indexables ou bloquées dans le fichier robots.txt
  • Pages en double ou non pertinentes accessibles trop facilement
  • Pages orphelines
  • Pages trop profondes dans l’arborescence

3. Corriger les points bloquants

Après l’analyse, une liste d’actions concrètes à mettre en place sera fournie pour corriger les erreurs et améliorer l’exploration.

Qui met en place les corrections ?

2 options possibles avec moi :

  • En consulting : je présente les recommandations à votre développeur qui les met en place sur le site internet et je réalise un contrôle final
  • En tant que développeur : je mets en place moi-même les recommandations de l’audit technique et produis un compte-rendu des actions menées

4. Aller plus loin avec une analyse de logs

L’analyse de crawl permet de simuler le passage des moteurs de recherche sur le site. Pour avoir un aperçu de ce qu’il s’y passe réellement, et pour savoir si les corrections appliquées ont porté leurs fruits, il faut analyser les traces laissées par les moteurs de recherche.

Pour ça, une analyse de logs est recommandée.

Pourquoi travailler avec un consultant SEO freelance ?

Quels sont les avantages par rapport à une agence classique ?

  • Une expertise technique avancée
  • Une approche pédagogique et favorisant l'autonomie
  • Un savoir-faire sur tous types de projets (e-commerce, assurance, média, formation, start-ups etc.)
  • 1 interlocuteur unique
  • Des coûts transparents et maîtrisés
  • 12 ans d'expérience en SEO

Outils utiles pour l’analyse de crawl

Logo Screaming Frog

Screaming Frog

Le crawler préféré des SEO. Très complet, cet outil permet de mener une analyse de crawl détaillée d’un site web et d’optimiser sa découverte par les moteurs de recherche

Logo Seolyzer

Seolyzer

Seolyzer est une plateforme SaaS Data SEO technique tout inclus : crawler en analyse de logs. Sa force est dans les analyses croisées de différentes sources de données

Logo Botify

Botify

Botify est un outil de crawl et d’analyse de logs très puissant permettant de faire des analyses croisées régulières et de les comparer entre elles

Besoin d'aide avec votre SEO ?