お客さまへの大切なお知らせ:膨大なサポート情報を少しでも早くお客さまにお届けするため、本コンテンツの日本語版は人間の翻訳者を介さない自動翻訳で提供されております。正確な最新情報については本コンテンツの英語版をご覧ください。
SEOのクローリングエラーを理解する
更新日時 2025年10月20日
以下の 製品でご利用いただけます(別途記載されている場合を除きます)。
SEOクローラーが一覧ページをインデックスできない場合、クローリングエラーを返します。これは、HubSpotのSEOツールやインポートツールのクローラーや、Semrushのような外部のクローラーでも起こりうることです。クローリングエラーを解決するための手順は、エラーとページがホスティングされている場所によって異なります。
HubSpotのSEOツールがHubSpotのページをクロールしている様子
SEOの推奨事項は、ページや投稿のパフォーマンス詳細の「最適化」タブで確認することができます。
- 目的のコンテンツに移動します。
- ウェブサイトページ:HubSpotアカウントにて、[コンテンツ]>[ウェブサイトページ]の順に進みます。
- ランディングページ:HubSpotアカウントにて、[コンテンツ]>[ランディングページ]の順に進みます。
- ブログ:HubSpotアカウントにて、[コンテンツ]>[ブログ]の順に進みます。
- コンテンツ の上にマウスポインターを置き、[パフォーマンス]をクリックします。
- [最適化]タブをクリックします。
- 既定では、左側のサイドバーメニューで [最適化案 ]が選択されています。コンテンツを再スキャンするには、[ 今すぐ再スキャン]をクリックします。ページのクロールに問題がある場合、次のようなエラーメッセージが表示されることがあります:
-
- ステータス 301: Moved Permanently : 301リダイレクトがクローラーのコンテンツへのアクセスを妨げている。
- ステータス 302:Object moved : 302(一時的な)リダイレクトが、クローラーによるコンテンツへのアクセスを妨げています。
- ステータス 403:Forbidden : サーバーには到達できるが、コンテンツへのアクセスは拒否される。
- ステータス404:「見つかりません」 : 削除または移動されたため、クローラーはコンテンツの公開中のバージョンを見つけることができません。
- robots.txtによってブロックされた[サイト]のクローリング: robots.txtファイル によりコンテンツのインデックス登録がブロックされています。
HubSpotのSEOツールで外部ページをクロールしている様子
HubSpotのSEOツールを使って外部ページをクロールしようとした場合、または外部コンテンツをHubSpotにインポートしている場合、これらのエラーのいずれかに遭遇することがあります:
- robots.txtファイルでブロックされたスキャン : robots.txtファイルで外部ページがインデックスから除外されている場合、HubSpotクローラーのユーザーエージェント「HubSpot Crawler」を除外対象として追加します。、robots.txtファイルの詳細についてはこちらをご覧ください。
- robots.txtファイルが取得できない : HubSpotのクローラーがサイトのrobots.txtファイルにアクセスできない場合、robots.txtファイルにアクセスできるか、サイトのトップレベルディレクトリーにあるかどうかを確認してください。、robots.txtファイルの詳細についてはこちらをご覧ください。
- クローラーがこのURLをスキャンできません : HubSpotのクローラーが特定のURLをクロールできない場合は、以下のトラブルシューティング手順をお試しください:
- URLが正しく入力されていることを確認する。
- クロールされるページが現在公開中であることを確認する。
- DNSがURLを解決できることを確認する。DNSエラーの解決については、Googleのドキュメントをご覧ください。
- サイト管理者に連絡し、当社のクローラーのユーザーエージェント「HubSpot Crawler」を例外として許可リストに追加するよう依頼してください。
外部SEOツールがHubSpotのページをクロールしている。
MozやSemrushなどの外部SEOツールを使ってHubSpotのページをクロールしようとした場合、ページを正常にクロールできないことがあります。
この問題の一般的な原因としては、次のようなものがあります:
- robots.txtファイルに ページを含めることで、ページはインデックス化またはクロールされなくなります。
- ページの ヘッダーHTML に「noindex」メタタグが含まれていると、ページのインデックス化またはクロールが妨げられています。
- HubSpotに接続されているサブドメインではなく、ルートドメインを監査するとタイムアウトエラーが発生します。
- RSSフィードやブログの一覧ページへのリンクは、新しいブログ記事が公開されると失効するため、リソースがブロックされたエラーが発生する可能性があります。
- HubSpot sprocketメニューを読み込むスクリプトなど、必要でないリソースは、ブロックされたリソースエラーを引き起こす可能性があります。これは、ページの残りの部分がクロールされるのを妨げるものではありません。
SEO
Blog
Website & Landing Pages
