防止內容出現在搜尋結果中

您可以在robots.txt 文件中添加 URL 标头，防止新内容出现在搜索结果中。搜索引擎使用这些文件来了解如何索引网站内容。 HubSpot系统域中包含hs-sites 的内容在robots.txt文件中总是被设置为不索引。

如果搜索引擎已经索引了您的内容，您可以在内容的 HTML 头部添加 "noindex "元标签。这将告诉搜索引擎停止在搜索结果中显示该内容。

请注意： 只有连接到 HubSpot 的域上托管的内容才能在 robots.txt 文件中被阻止。了解有关在文件工具中自定义文件 URL 的更多信息。

使用 robot.txt 文件

您可以将尚未被搜索引擎收录的内容添加到 robots.txt 文件中，以防止其显示在搜索结果中。

在 HubSpot 中编辑 robots.txt 文件：

• 在你的 HubSpot 帳戶中，點擊頂端導覽列中的settings「設定圖示」。

• 在左侧边栏菜单中，导航至内容 >页面。

• 选择要编辑 robots.txt 文件的域：
  • 要编辑所有已连接域的 robots.txt 文件，请单击 "选择一个域以编辑其设置 "下拉菜单，然后选择 "所有域的默认设置"。
  • 要编辑特定域的 robots.txt 文件，请单击 "选择一个域以编辑其设置 "下拉菜单并选择该域。如有必要，单击覆盖默认设置。这将覆盖该域的 robots.txt 默认设置。

• 单击SEO & Crawlers 选项卡。
• 在Robots.txt部分，编辑文件内容。robots.txt 文件有两个部分：.
  
  • User-agent：定义规则适用的搜索引擎或网络机器人。默认情况下，这将被设置为包括所有搜索引擎，显示为星号 (*)，但你也可以在此指定特定的搜索引擎。如果使用 HubSpot 的网站搜索模块，则需要将HubSpotContentSearchBot作为单独的用户代理。这将允许搜索功能抓取你的页面。

• • 禁止： 告诉搜索引擎不要抓取和索引任何使用特定 URL 标头的文件或页面。对于要添加到 robots.txt 文件的每个页面，输入 Disallow：/url-slug （例如， www.hubspot.com/welcome 将显示为Disallow: /welcome）。

• 在左下角点击保存。

有关 robots.txt 文件格式的更多信息，请参阅Google 开发人员文档。

使用 "noindex "元标签

如果内容已经被搜索引擎索引，可以添加 "noindex "元标签，指示搜索引擎今后停止索引。

请注意： 此方法不应与 robots.txt 方法结合使用，因为这将阻止搜索引擎看到 "noindex "标签。

在页面和帖子中添加 "noindex "元标签

• 导航至您的内容：

  • 网站页面：在你的 HubSpot 帳戶中，瀏覽「內容」>「網站頁面」。
  • 登陆页面：在你的 HubSpot 帳戶中，瀏覽「內容」>「登陸頁面」。
  • 博客：在你的 HubSpot 帳戶中，瀏覽「內容」>「部落格」。
• 单击内容名称。
• 在内容编辑器中，单击设置 菜单并选择高级。
• 在对话框的 "附加代码片段"部分，在 "头部 HTML "字段中添加以下代码：<meta name="robots" content="noindex"> 。

• 点击右上角的 "更新 "，即可将更改生效。

为知识库文章添加 "noindex "元标签

• 在你的 HubSpot 帳戶中，瀏覽「服務」>「知識庫」。

• 单击内容名称。
• 在文章编辑器中，单击 "设置"选项卡，然后单击 "高级选项"。
• 在 "附加代码片段"部分，在 "头部 HTML "字段中添加以下代码：<meta name="robots" content="noindex">.

• 在右上角单击 "更新 "，即可启用此更改。

如果您有谷歌搜索控制台 账户，您可以使用谷歌的移除工具加速谷歌搜索结果的移除过程。