Empêchez du contenu d'apparaître dans les résultats de recherche

Empêchez du nouveau contenu d’apparaître dans les résultats en ajoutant le slug d’URL à un fichier robots.txt. Les moteurs de recherche utilisent ces fichiers pour comprendre comment indexer le contenu d'un site web. Le contenu des domaines du système HubSpot contenant hs-sites est toujours défini comme non indexé dans un fichier robots.txt. 

Si les moteurs de recherche ont déjà indexé votre contenu, vous pouvez ajouter une balise méta « noindex » à l'en-tête HTML du contenu. Cette action indiquera aux moteurs de recherche de ne plus l'afficher dans les résultats de recherche. 

Remarque : Seul le contenu hébergé sur un domaine connecté à HubSpot peut être bloqué dans votre fichier robots.txt. Découvrez-en davantage sur la personnalisation des URL de fichier dans l'outil fichiers. 

Utiliser les fichiers robot.txt

Ajoutez du contenu qui n’a pas encore été indexé par les moteurs de recherche à un fichier robots.txt pour empêcher qu’il ne s’affiche dans les résultats de recherche. 

Pour modifier le fichier robots.txt dans HubSpot : 

1. Dans votre compte HubSpot, cliquez sur l'icône Paramètres dans la barre de navigation principale.

2. Dans le menu latéral de gauche, accédez à Contenu > Pages.

3. Sélectionnez le domaine dont vous souhaitez modifier le fichier robots.txt : 
   • Pour modifier le fichier robots.txt pour tous les domaines connectés, cliquez sur le menu déroulant Sélectionnez un domaine pour modifier ses paramètres et sélectionnez Paramètres par défaut pour tous les domaines (sélectionné par défaut).
   • Pour modifier le fichier robots.txt d'un domaine spécifique, cliquez sur le menu déroulant Sélectionnez un domaine pour modifier ses paramètres et sélectionnez le domaine. Si nécessaire, cliquez sur Remplacer les paramètres par défaut. Cela remplacera tous les paramètres par défaut de robots.txt pour ce domaine. 
4. Cliquez sur le SEO et robots d'indexation.
5. Dans la section Robots.txt, modifiez le contenu du fichier. Il existe deux parties dans un fichier robots.txt :
   • User-agent : définit le moteur de recherche ou le bot web auquel une règle s'applique. Par défaut, tous les moteurs de recherche seront inclus, ce qui est indiqué par un astérisque (*), mais vous pouvez indiquer des moteurs de recherche spécifiques ici. Si vous utilisez le module de recherche de site de HubSpot, vous devrez inclure HubSpotContentSearchBot comme user-agent distinct. Cela autorisera la fonctionnalité de recherche à analyser vos pages.
   • Disallow : indique à un moteur de recherche de ne pas analyser ni d'indexer les fichiers ou les pages utilisant un slug URL spécifique. Pour chaque page que vous voulez ajouter au fichier robots.txt, saisissez Disallow: /url-slug (par exemple www.hubspot.com/welcome serait affiché Disallow: /welcome).
6. Lorsque vous avez terminé, cliquez sur Enregistrer dans l'angle inférieur gauche. 

Pour en savoir plus sur le formatage d’un fichier robots.txt, consultez la documentation destinée aux développeurs de Google.

Utiliser les balises méta « noindex »

Si le contenu a déjà été indexé par les moteurs de recherche, vous pouvez ajouter une balise méta « noindex » pour demander aux moteurs de recherche de ne plus l'indexer à l'avenir. 

Remarque : Cette méthode ne doit pas être combinée avec la méthode robots.txt, car elle empêchera les moteurs de recherche de voir la balise « noindex ».

Ajouter des méta-balises « noindex » aux pages et aux articles

1. Accédez à votre contenu :

   • Pages de site web : Dans votre compte HubSpot, cliquez sur Plus, puis accédez à Contenu > Pages de site web. Si l'option Plus n'apparaît pas dans votre compte, accédez directement à Contenu > Pages de site web.
   • Pages de destination : Dans votre compte HubSpot, cliquez sur Plus, puis accédez à Contenu > Pages de destination. Si l'option Plus n'apparaît pas dans votre compte, accédez directement à Contenu > Pages de destination.
   • Blog : Dans votre compte HubSpot, cliquez sur Plus, puis accédez à Contenu > Blog. Si l'option Plus n'apparaît pas dans votre compte, accédez directement à Contenu > Blog.
2. Cliquez sur le nom de votre contenu. 
3. Dans l'éditeur de contenu, cliquez sur Paramètres dans l'angle supérieur droit.
4. Dans la boîte de dialogue, cliquez sur Paramètres avancés dans le menu latéral de gauche.
5. Dans la section Blocs de code supplémentaires, saisissez le code suivant dans le champ HTML de l'en-tête : <meta name="robots" content="noindex">.

6. Cliquez sur X pour fermer la boîte de dialogue des paramètres.
7. Pour mettre en œuvre vos modifications, cliquez sur Mettre à jour ou Publier en haut à droite.

Ajouter des méta-balises « noindex » aux articles de la base de connaissances

1. Dans votre compte HubSpot, cliquez sur Plus, puis accédez à Service client > Base de connaissances. Si l'option Plus n'apparaît pas dans votre compte, accédez directement à Service client > Base de connaissances.
2. Cliquez sur le nom de votre contenu. 
3. Dans l'éditeur d'article, cliquez sur Paramètres dans l'angle supérieur droit.
4. Dans la boîte de dialogue, cliquez sur Options avancées dans le menu latéral de gauche.
5. Dans la section Blocs de code supplémentaires, saisissez le code suivant dans le champ HTML de l'en-tête : <meta name="robots" content="noindex">.

6. Cliquez sur X pour fermer la boîte de dialogue des paramètres.
7. Pour mettre en œuvre vos modifications, cliquez sur Mettre à jour ou Publier en haut à droite.

Le contenu apparaît toujours dans les résultats de recherche

Après avoir ajouté une balise noindex ou mis à jour votre fichier robots.txt, les moteurs de recherche ont besoin de temps pour réindexer et désindexer votre contenu. Si votre contenu continue d’apparaître dans les résultats de recherche, confirmez les éléments suivants :

• Accessibilité de la page : la page doit être accessible au public pour que les moteurs de recherche puissent l’explorer. Les pages privées ou protégées par mot de passe ne seront pas visitées, ce qui empêche la lecture de la balise noindex.
• HTML de l’en-tête : vérifiez le champ HTML de l’en-tête dans les paramètres de la page et la source de la page en direct pour confirmer que la balise noindex a été enregistrée et s’affiche correctement sur la page.
• robots.txt conflits : examinez votre fichier robots.txt pour confirmer qu’il n’y a pas de règles d’interdiction empêchent les moteurs de recherche d’accéder à la page. Si les moteurs de recherche ne peuvent pas explorer la page, ils ne pourront pas lire la balise noindex.

Pour accélérer la désindexation pour les résultats de recherche Google, utilisez l’Outil de suppression de Google Search Console.