インデックス可能性
インデックス可能性とは、検索エンジンが特定のページをそのインデックスに追加できる度合いを指します。これは、ページがクロールされた後、noindex 指示、canonical の競合、重複などの阻害要因がなければ検索結果に表示され得るかどうかを示します。
Indexabilityとは、検索エンジンがページをインデックスに含めるための能力
のことであり、クロールされたからといって必ずしもページがインデックスされるわけではありません。主な阻害要因はnoindexタグやHTTPヘッダー、canonicalの設定ミス、重複コンテンツ、robots.txtによるブロック、サーバーエラー、孤立ページ
です。
これは、クロール可能性(ページへアクセスして発見できる能力)とは別のものです。クロールがブロックされている場合、検索エンジンはそのページがそもそもインデックス可能かどうかを判断する段階に到達しません。Google Search ConsoleのURL検査ツールや、SemrushまたはAhrefsのサイト監査でインデックス阻害要因を診断できます。
概要
Indexabilityとは、検索エンジンが発見したページを自社のインデックスデータベースに追加できる度合いを指します。Semrushではindexabilityを「検索エンジンがページをインデックスに追加できる能力」と定義しており、クロールされたページであっても、関連する品質基準とインデックス指示を満たして初めてインデックスされると説明しています。
重要なのは、ここでのインデックスはprocessではなくcapacityであるという点です。インデックスとは、検索エンジンがページを解析して保存する実際の処理を指し、indexabilityとは、その処理を可能にするページの状態や条件を指します。そのため、インデックスを妨げる指示が適用されているページは、indexabilityが低いと判断されます。
阻害要因とクロール可能性との違い
indexabilityを低下させる代表的な要因は以下のとおりです。
noindexディレクティブ:
<meta name="robots" content="noindex">またはX-Robots-Tagの HTTP ヘッダーが適用されている場合、ページはクロールされていてもインデックスから除外されます。canonical の設定ミス: 誤った canonical は、どのバージョンをインデックスすべきかについて検索エンジンを混乱させるため、意図したページがインデックスされない場合があります。
重複コンテンツ: ほぼ同一のページが多数存在すると、検索エンジンはどのページをインデックスしてランク付けすべきかを特定できません。
robots.txt によるブロック: これによりクロール自体が妨げられ、インデックスの指示を読み取る機会が完全に断たれます。
サーバーエラー、リダイレクトループ、そして孤立ページ: これらはアクセスと解析を妨げ、インデックスされる可能性を下げます。
クロール可能性とは、検索エンジンのボットがページを発見し、アクセスできるかどうかを指します。Semrush では、クロール可能性を「検索エンジンがページをどれだけ容易に発見できるか」とし、インデックス可能性を「検索エンジンがページをインデックスに追加できるかどうか」と区別しています。言い換えると、クロール可能性はアクセス段階、インデックス可能性はインデックス化の段階における可能性を扱います。この 2 つは順次的に連動しており、クロールが不可能であれば、エンジンはページがインデックス可能かどうかを判断する段階に到達しません。
診断、改善、そして根拠
Google Search Central のドキュメントによると、noindex ルールを有効にするには、ページが robots.txt によってブロックされていてはなりません。ページがブロックされている場合、Googlebot は noindex ディレクティブを読み取れないため、外部リンクsやその他のシグナルを通じて検索結果に表示される可能性があります。そのため、除外したいページに推奨される方法は、クロール可能な状態のままにして noindex のみを適用することです。
診断は基本的にGoogle Search Consoleの URL 検査ツールに依存しており、Googlebot が実際に受け取った HTML、インデックスの状態、除外された理由を確認します。また、Page Indexing レポートで noindex が検出されたページの一覧を確認することもできます。Semrush と Ahrefs のサイト監査機能は、壊れたページ、孤立ページ、重複コンテンツなどのインデックス阻害要因を一括でスキャンし、影響を受けているページと修正方法を表示します。
アクションチェックリスト
インデックス対象のページに、意図しないnoindexタグやヘッダーが付いていないことを確認してください。
除外したいページについては、robots.txt でブロックせず、クロール可能な状態に保ったうえで noindex を適用してください。
canonical が正しい代表 URL を指していること、また自己参照 canonical が正確であることを確認してください。
重複またはほぼ同一のコンテンツは統合するか、canonical で解決してください。
Google Search Console の URL Inspection ツールで、インデックス状況と除外理由を定期的に確認してください。Google Search ConsoleSemrush または Ahrefs のサイト監査で、インデックス阻害の問題を定期的に監視してください。
Routinely monitor index-blocking issues with Semrush or Ahrefs site audits.