Voorkomen dat inhoud in zoekresultaten verschijnt

U kunt voorkomen dat nieuwe inhoud in de resultaten wordt weergegeven door de URL-slug toe te voegen aan een robots.txt-bestand.Zoekmachines gebruiken deze bestanden om te begrijpen hoe ze de inhoud van een website moeten indexeren.

Als zoekmachines je inhoud al hebben geïndexeerd, kun je een "noindex" meta-tag toevoegen aan de hoofd-HTML van de inhoud. Dit zal zoekmachines vertellen om te stoppen met het weergeven van de inhoud in de zoekresultaten.

Let op: alleen content die gehost wordt op een domein dat verbonden is met HubSpot kan geblokkeerd worden in uw robots.txt bestand. Meer informatie over het aanpassen van bestands-URL's in de bestandstool.

Robots.txt-bestanden gebruiken

U kunt inhoud die nog niet is geïndexeerd door zoekmachines toevoegen aan een robots.txt-bestand om te voorkomen dat deze wordt weergegeven in zoekresultaten.

Om uw robots.txt bestand te bewerken in HubSpot:

• Klik in uw HubSpot-account op de settingsinstellingenpictogram in de hoofdnavigatiebalk.

• In het linker zijbalk menu, navigeer naar Website>Pagina's.

• Selecteer het domein waarvan u het robots.txt bestand wilt bewerken:
  • Om het robots.txt-bestand voor alle aangesloten domeinen te bewerken, klikt u op het vervolgkeuzemenu Kies een domein om zijn instellingen te bewerkenen selecteert uStandaardinstellingen voor alle domeinen.
  • Als u het robots.txt-bestand voor een specifiek domein wilt bewerken, klikt u op het vervolgkeuzemenu Kies een domeinom de instellingen ervan te bewerken en selecteert u het domein. Klik, indien nodig, op Standaardinstellingenoverschrijven. Hiermee worden alle standaardinstellingen voor robots.txt voor dit domein overschreven.

• Klik op het tabbladSEO & Crawlers.
• In deRobots.txt sectie, bewerk de inhoud van het bestand. Er zijn twee delen van een robots.txt bestand:.
  
  • User-agent: definieert de zoekmachine of webbot waarop een regel van toepassing is. Standaard zal dit worden ingesteld om alle zoekmachines te omvatten, wat wordt weergegeven met een asterisk (*), maar u kunt hier specifieke zoekmachines specificeren. Als u HubSpot's module site zoekengebruikt, moet u HubSpotContentSearchBot als een aparte user-agent opnemen. Dit zorgt ervoor dat de zoekfunctie je pagina's kan crawlen.

• • Disallow (Uitsluiten): Vertelt een zoekmachine om geen bestanden of pagina's te crawlen en te indexeren die een specifieke URL-slug gebruiken. Voor elke pagina die u wilt toevoegen aan het robots.txt bestand, voert u in Disallow: /url-slug (bijv, www.hubspot.com/welcome zou verschijnen als Disallow: /welcome).

• Klik linksonder opOpslaan.

Meer informatie over het opmaken van een robots.txt-bestand vindt u in de documentatie voor ontwikkelaars van Google.

Gebruik "noindex"-metatags

Als inhoud al is geïndexeerd door zoekmachines, kunt u een "noindex"-metatag toevoegen om zoekmachines opdracht te geven de inhoud in de toekomst niet meer te indexeren.

Let op: tdeze methode mag niet worden gecombineerd met de robots.txt methode, omdat dit zal voorkomen dat zoekmachines de "noindex" tag zien, en is niet beschikbaar voor pagina's die gebruik maken van starter templates.

Om een "noindex" meta tag aan je inhoud toe te voegen:

• Navigeer naar uw inhoud:

  • Website Pagina's: { local.navWebsitePages }}
  • Landingspagina's: { local.navLandingPages }}
  • Blog: { local.navBlog }}
  • Kennisbank: { local.navKnowledgeBase }}

• Beweeg de muis over de inhoud en klik op Bewerken.
• Klik in de inhoudseditor op het tabblad Instellingen en vervolgens opGeavanceerde opties.
• Voeg in de sectie Additional code snippets de volgende code toe aan het veld Head HTML : <meta name="robots" content="noindex">.

• Klik rechtsboven opBijwerkenom deze wijziging door te voeren.

Als u een Google Search Console-accounthebt, kunt u dit proces voor Google-zoekresultaten versnellen met de Removals Tool van Google.