Comprendre les erreurs d'analyse SEO

Si un robot d'exploration SEO ne peut pas indexer une page, il renverra une erreur d'exploration. Cela peut se produire avec les crawlers dans les outils de référencement et d'importation de HubSpot, ainsi qu'avec les crawlers externes tels que Semrush. Les étapes de résolution d'une erreur d'analyse dépendent de l'erreur et de l'emplacement de la page hébergée. 

Les outils SEO de HubSpot parcourent une page

Vous pouvez afficher les recommandations de référencement dans l'onglet Optimisation des détails de performance d'une page ou d'un article. S'il y a des problèmes lors de l'exploration de la page, vous pouvez voir l'un des messages d'erreur suivants : 

• État 301 : Définitivement déplacé - une redirection 301 empêche le robot d'exploration d'accéder au contenu. 
• État 302 : objet déplacé - une redirection 302 (temporaire) empêche le robot d'accéder au contenu.
• État 403 : Interdit - le serveur peut être atteint, mais l'accès au contenu est refusé.
• Status 404 : Introuvable - le robot d'exploration n'est pas en mesure de trouver une version en ligne du contenu, car celui-ci a été supprimé ou déplacé.
• Exploration du [site] bloqué par robots.txt - un fichier robots.txt bloque l'indexation du contenu. 

Les outils SEO de HubSpot parcourent une page externe

Si vous avez tenté de parcourir des pages externes à l'aide des outils SEO de HubSpot ou si vous importez du contenu externe vers HubSpot, vous pouvez rencontrer l'une des erreurs suivantes : 

• Scanner bloqué par le fichier robots.txt : si votre page externe est exclue de l'indexation par votre fichier robots.txt, ajoutez l'agent utilisateur de notre robot « HubSpot Crawler » à titre d'exemption. Apprenez-en davantage sur l'utilisation d'un fichier robots.txt ici. 
• Le fichier robots.txt n'a pas pu être récupéré : si les robots d'exploration de HubSpot ne peuvent pas accéder au fichier robots.txt de votre site, vérifiez que le fichier robots.txt est accessible et dans le répertoire de premier niveau de votre site. Apprenez-en davantage sur l'utilisation d'un fichier robots.txt ici. 
• Le robot d'exploration ne peut pas analyser cette URL : si les robot d'exploration de HubSpot ne peuvent pas analyser une URL spécifique, essayez de suivre les étapes suivantes pour résoudre le problème : 
  • Vérifiez que l'URL a été saisie correctement. 
  • Vérifiez que la page consultée est actuellement en ligne.
  • Vérifiez que DNS peut résoudre l'URL. Découvrez-en davantage sur la résolution des erreurs DNS dans la documentation de Google. 
  • Contactez votre administrateur de site et lui demander d'ajouter l'agent utilisateur de notre robot d'exploration, "HubSpot Crawler", à la liste d'autorisation en tant qu'exemption. 

Un outil SEO externe parcourant une page HubSpot

Si vous avez tenté d'indexer vos pages HubSpot à l'aide d'un outil SEO externe, tel que Moz ou Semrush, il est possible que vous ne parveniez pas à indexer correctement vos pages.

Les causes les plus courantes de ce problème sont : 

• L'inclusion de vos pages dans le fichier robots.txt les empêche d'être indexées ou explorées. 
• Une balise meta noindex dans le code HTML d'en-tête de vos pages les empêche d'être indexées ou explorées. 
• L'audit d'un domaine racine, plutôt que du sous-domaine connecté à HubSpot, provoque une erreur de délai d'attente.
• Les liens des flux RSS et des pages de listing de blog expirent lorsque de nouveaux articles de blog sont publiés, ce qui peut générer des erreurs de ressources bloquées.
• Les ressources non essentielles, telles que les scripts qui chargent le menu de pignon HubSpot, peuvent provoquer des erreurs de ressources bloquées. Cela n'empêche pas le reste de la page d'être parcouru.