クロール済み - インデックス未登録：意味と修正方法

クロール済み - インデックス未登録は、Search Consoleの「ページがインデックスに登録されない理由」に並ぶ項目のひとつで、コンテンツサイトやオンラインストアでは最も多い項目であることがよくあります。Googleのページのインデックス登録レポートのドキュメントは、この状態を2文で説明しています。「ページはGoogleによってクロールされましたが、インデックスには登録されていません。今後インデックスに登録される場合も、登録されない場合もあります。このURLをクロール用に再送信する必要はありません。」このガイドでは、Googleがどう判断したのか、どのURLをこの状態のままにしてよいのか、重要なURLで本当の原因をどう見つけるのか、原因ごとにどの修正が合うのかを説明します。

「クロール済み - インデックス未登録」とはどういう意味ですか？

Googleは1つのURLを3つの段階で処理します。発見とクロール、次にインデックス登録、最後に順位付けです（クロールとインデックス登録に関する用語集の項目で各段階を詳しく説明しています）。この状態のページは最初の段階を通過しています。Googlebotがページを要求し、応答を受け取りました。止まったのは2番目の段階です。コンテンツを処理したうえで、Googleはそれをインデックスに保存しないことを選びました。

この判断は意図的であり、文書化されています。Googleの検索の仕組みに関するガイドには、「インデックス登録は保証されません。Googleが処理するすべてのページがインデックスに登録されるわけではありません」と書かれています。よくある理由として、コンテンツの品質が低いこと、インデックス登録を禁止するメタ要素のrobots指定があること、サイト設計がインデックス登録を妨げていることの3つが挙げられています。noindexの指定は独自のステータス（「'noindex' タグにより除外」）を生むため、クロール済みでインデックス未登録として表示されるページは、主に最初と3番目の理由を示しています。

覚えておきたい点が3つあります。

• ペナルティではありません。手動による対策は関係せず、サイトの他の部分が罰せられることもありません。
• 最終的な判断ではありません。Googleは、ページが「今後インデックスに登録される場合も、登録されない場合もある」と述べています。再クロールのたびに新たに判断されます。
• 以前インデックスされていたページにも起こります。Googleは保持する価値がないと判断したURLを定期的に削除するため、古い記事があなたの側で何も変更していなくてもこの状態に移ることがあります。

インデックス登録の全体の流れと、それを加速させる要素については、Googleインデックス登録のガイドを参照してください。

「クロール済み」と「検出済み - インデックス未登録」の違いは何ですか？

この2つのステータスは似ていますが、止まる段階が異なるため、必要な修正も異なります。

要するに、「検出済み」は主にクロールの問題であり、「クロール済み」は主にインデックス登録の判断です。サーバーの速度を改善しても、クロール済みのページがインデックスに入ることはめったにありません。ページ自体を改善すれば入る可能性があります。

これは問題でしょうか、それともこれらのURLは放置してよいのでしょうか？

ある程度の規模のサイトには、必ずこの状態のURLがあります。その多くは本来、検索で順位が付く必要がないものです。何かを修正する前に、リストをURLの種類で並べ替えてください。価値の低いURLの数が安定しているなら心配はいりません。急増した場合や、重要なページがリストにある場合は問題です。

Googleがページをクロールしても、インデックスしないのはなぜですか？

1. コンテンツの付加価値が少ない

これが最も多い原因です。本文が数行しかないページ、既にインデックスされた数十のページが述べている内容を繰り返すだけの一般的なコンテンツ、名前だけを差し替えたテンプレートで作られたページは、典型的な薄いコンテンツです。Googleの役に立つコンテンツの作成に関する指針は、ページが「検索結果にある他のページと比べて十分な価値を提供しているか」を問いかけています。このテストに通らないページは、インデックスされないまま何度もクロールされることがあります。

2. 別のページと近すぎる

ほぼ重複したページ（説明文が同じ商品のバリエーション、都市名だけを入れ替えた地域ページ、印刷用ページなど）は、まとめられて除外されることがよくあります。Googleが重複を明確に特定した場合は、通常は正規化のステータスが表示されます。類似が部分的な場合は、このステータスに分類されることがあります。一貫したcanonicalタグと、本当に独自性のあるコンテンツが解決策です。

3. コンテンツがJavaScriptの実行後にしか存在しない

GoogleのJavaScript SEOの基本は、クロール、レンダリング、インデックス登録という3つのフェーズを説明し、レンダリングを待つページは「数秒間この待機列にとどまることがあり、それ以上の時間がかかる場合もあります」と記しています。生のHTMLがほぼ空で、テキストがレンダリング後にしか現れない場合（あるいはスクリプトやAPI呼び出しがブロックされてレンダリングに失敗する場合）、Googleはほぼ白紙のページを評価するかもしれません。サーバーサイドレンダリングやプリレンダリングを使えば、このリスクはなくなります。選択肢はJavaScript SEOのガイドで説明しています。

4. サイトがそのページを重要でないと示している

サイトマップからしか到達できないページや、5クリックも深い場所にあり、ページネーションされたアーカイブからの1本のリンクしかないページは、そのページがあなたにとって重要でないとGoogleに伝えています。インデックス済みで訪問されているページからの内部リンクは、あなたがコントロールできる最も強いシグナルの1つです。

5. その他のケース

ページ自体とは別の理由でここに現れるURLもあります。レポートの反映が遅れている（すでにインデックスされている可能性がある）、リダイレクト先が古いURL経由でクロールされた、あるいはソフト404のページ（検索結果ゼロ、「商品が見つかりません」など）が200ステータスを返している、といったケースです。これらは書き直しではなく確認が必要です。

「クロール済み - インデックス未登録」を段階的に診断する方法

1. レポートを開きます。Search Consoleで「インデックス作成」から「ページ」を開き、「ページがインデックスに登録されない理由」の下にある「クロール済み - インデックス未登録」をクリックします。傾向を確認してください。急増は、移行、テーマ変更、新規ページの一括公開の後に起こることが多いです。
2. 上の表を使ってURLを種類ごとに並べ替え、検索結果に出したいページだけを残します。
3. 重要なURLを1つずつ検査します。URL検査ツールに貼り付けます。ステータス、最後のクロール日、クロールとインデックス登録が許可されていることを確認してください。無料のインデックス可能性チェッカーを使えば、数秒でページを確認することもできます。
4. 誤検知を除外します。「URLはGoogleに登録されています」と表示される場合、レポートが遅れているだけで、そのページには何も必要ありません。
5. ライブURLをテストし、レンダリングされたHTMLを確認します。レンダリング後の版で本文、リンク、タイトルのいずれかが欠けている場合、問題はレンダリングにあります。
6. 順位が付いているページと比較します。狙いのクエリを検索し、上位の結果を読みます。それらのほうが答えを詳しく示している、または別の形式で示しているなら、あなたのページには品質か検索意図の差があります。
7. そのページへの内部リンク数を数えます。たとえば内部リンク分析ツールを使います。深い階層のページからのリンクがゼロまたは1本だけなら、弱いシグナルです。

修正方法：原因ごとに1つの対策

修正を定着させる習慣が2つあります。第一に、定期的にコンテンツ監査を行うことです。弱いページを整理・統合すると、Googleがクロールする内容全体の平均品質が上がります。第二に、XMLサイトマップを整理し、順位を付けたい正規でインデックス可能なURLだけを残すことです。大規模な整理の後には、Googleに再送信してください。

修正後、ページがインデックスされるまでどのくらいかかりますか？

Googlebotがページを再クロールするまで何も起こりません。これには、Googleがサイトを訪れる頻度によって数日から数週間かかることがあります。複数のURLを修正したら、レポートの「修正を検証」をクリックできます。Googleは、検証には「通常は約2週間かかりますが、場合によってはそれより長くかかることもあります」と説明しています。検証は任意です。ページが再クロールされるにつれて、レポートは自動的に更新されます。

大規模なサイトでは、URLを1つずつ確認するのは時間がかかります。Search Console APIの利用上限によると、URL検査APIは各サイトにつき1日2000件、1分600件までのクエリが可能です。これは、重要なページ数百件を継続して追跡するのに十分な数です。2回か3回再クロールされた後もページがこの状態にとどまる場合、修正は不十分でした。まずは品質と検索意図を見直してください。

なぜSEOとAIでの可視性にとって重要なのですか？

Googleのインデックス外にあるページは、品質がどれほど高くても有機検索の流入をもたらしません。コンテンツサイトでは、この状態にある記事が多いと、制作の手間が無駄になるうえ、Googleに「必要のないページを公開しているサイト」というシグナルを送ることになり、新しいページのインデックス登録を遅らせるおそれもあります。

AIアシスタントは、2つ目の理由になります。ChatGPT、Perplexity、Geminiは、多くの質問に対してウェブ検索のインデックスからページを取り出して回答し、使った情報源を引用します。インデックスされていないページは、取り出される可能性がはるかに低く、したがって引用される可能性もはるかに低くなります。AIが回答時にどの情報源を優先するかは、AIが最も多く引用するプラットフォームに関する当社の調査で確認できます。

Sorankは当社のプロダクトで、autopilotで動くSEO・GEOソフトウェアです。そのGEO・SEOダッシュボードは、Search Consoleのクリック数、表示回数、掲載順位を表示するため、修正したページがいつ表示回数を得始めたかを確認できます。また、記事生成ツールは、出典付きの記事を内部リンクを組み込んだ状態で作成します。このステータスで最も多くペナルティを受けやすい2つの要素に対応しています。

要点はこうです。URLを並べ替え、順位を付ける必要のないものは無視し、重要なページの原因（コンテンツ、重複、レンダリング、内部リンク）を修正してから、Googleに再確認を依頼してください。最初からインデックスされ引用されるページを公開するには、Sorankの料金プランをご覧ください。月額49ドルから、3日間の無料トライアルがあります。