"Discovered - currently not indexed": ماذا تعني الحالة وكيف تُصلحها

Discovered - currently not indexed من أكثر الأسباب شيوعاً ضمن "لماذا لا تُفهرَس الصفحات" في Google Search Console، ومن أكثرها سوءاً في الفهم. توفر وثائق تقرير فهرسة الصفحات من Google تعريفاً موجزاً: "عثر Google على الصفحة، لكنها لم تُزحف بعد. عادةً أراد Google زحف الرابط، لكن كان متوقعاً أن يُثقل ذلك الموقع؛ لذلك أعاد Google جدولة الزحف." يشرح هذا الدليل ما يقف خلف هذه العبارة، وكيف تميّز التأخير العادي من المشكلة الحقيقية، والإصلاحات التي تُخرج الروابط من الطابور. للاطلاع على عملية الفهرسة كاملة، راجع دليلنا حول جعل Google يفهرس صفحاتك.

ماذا تعني "Discovered - currently not indexed"؟

يفهرس Google الصفحة على ثلاث مراحل: الاكتشاف (يعرف أن الرابط موجود)، والزحف (يُنزّل Googlebot الصفحة)، والفهرسة (يحلل Google المحتوى ويقرر ما إذا كان سيحفظه). الرابط في هذه الحالة اجتاز المرحلة الأولى فقط. يعرف Google العنوان وهو في الطابور، لكنه لم ينزّله قط، ولذلك لم يُقيّم محتواه بعد. لهذا يبدو حقل "آخر زحف" فارغاً عند فحص مثل هذا الرابط.

تُخلط هذه الحالة كثيراً مع جارتها "Crawled - currently not indexed". والفرق بينهما يحدد أين تبحث عن السبب.

باختصار، "Discovered" مشكلة زحف، أما "Crawled" فهو قرار فهرسة. إعادة كتابة محتوى صفحة لم ينزّلها Google لن تغيّر شيئاً حتى يعود Googlebot ليجلبها.

هل "Discovered - currently not indexed" مشكلة؟

الأمر يتوقف على الحجم والصفحات المتأثرة. ثلاثة أوضاع طبيعية ولا تستلزم أي إجراء:

• صفحات جديدة نُشرت خلال الأيام أو الأسابيع الأخيرة. الاكتشاف والزحف خطوتان منفصلتان، ويجدولهما Google.
• روابط لا تريد فهرستها على أي حال: تركيبات الفلاتر، ونتائج البحث الداخلي، وأرشيفات الوسوم، ومعاملات التتبع. وجودها في القائمة إشارة إلى حظرها أو التوقف عن الربط إليها، لا أكثر.
• جزء صغير من موقع كبير. لا يوجد موقع تُفهرس كل روابطه.

يصبح الأمر مشكلة عندما تبقى صفحاتك المهمة (المنتجات، والفئات، والمقالات، وصفحات الخدمات) في القائمة أسابيع، أو عندما يتزايد عددها أسرع من عدد الصفحات المفهرسة. تذكر وثيقة ميزانية الزحف من Google هذه الإشارة بعينها: المواقع التي تضم "جزءاً كبيراً من إجمالي الروابط" مصنّفاً كـ Discovered - currently not indexed عليها أن تفحص كيف يوزّع Google زحفه عليها.

ما الذي يسبب "Discovered - currently not indexed"؟

يحدد Google حجم الزحف بناءً على عاملين تصفهما وثيقة ميزانية الزحف: حد سعة الزحف (ما يحتمله خادمك دون بطء) وطلب الزحف (مدى رغبة Google في روابطك، بحسب الحجم وتكرار التحديث وجودة الصفحات وصلتها مقارنةً بالمواقع الأخرى). كل سبب أدناه يخفض أحد هذين العاملين. يبرز مفهوم ميزانية الزحف أكثر في المواقع الكبيرة، لكن خادماً بطيئاً أو بنية موقع ضعيفة قد يفعّلان الحالة حتى في موقع من بضع مئات من الصفحات.

1. خادم بطيء أو غير مستقر

هذا هو السبب الذي يذكره Google أولاً. وفق دليل ميزانية الزحف، ترتفع سعة الزحف عندما تبقى أزمنة الاستجابة "مستقرة أو تتحسن"، وتنخفض عندما يتباطأ الموقع أو يعيد أخطاء الخادم. الاستضافة المشتركة، وقاعدة البيانات المثقلة، والقالب الثقيل، أو جدار حماية يحدّ من Googlebot، كلها تقلل عدد الروابط التي يقبل Google تنزيلها يومياً.

2. روابط كثيرة منخفضة القيمة تتنافس على الزحف

التصفح بالأوجه، ومعاملات الترتيب، ومعرّفات الجلسات، وصفحات التقويم اللانهائية، وصفحات الوسوم المولدة تلقائياً، وتنويعات المنتجات المتطابقة تقريباً، تنتج آلاف الروابط. يحذّر دليل Google من أن الروابط المكررة وغير المهمة تستهلك وقت الزحف، وأن صفحات soft 404 "ستستمر في الزحف وتهدر ميزانيتك". صفحاتك الجيدة تنتظر في الطابور نفسه.

3. روابط داخلية ضعيفة

الرابط الذي يظهر فقط في خريطة الموقع XML، أو الذي يُربط من صفحة تبعد خمس نقرات عن الرئيسية، يرسل إشارة أولوية ضعيفة. تضيف وثيقة Google حول الروابط القابلة للزحف فخاً تقنياً: لا يستطيع Google تتبع الرابط إلا إذا كان عنصر HTML من نوع <a> يحمل السمة href. القوائم أو أزرار "تحميل المزيد" المبنية فقط على أحداث JavaScript قد تُخفي الصفحات عن الزاحف.

4. إشارات الجودة على مستوى الموقع كله

يعتمد طلب الزحف جزئياً على تقييم Google لبقية الموقع. إذا كان جزء كبير من الصفحات المزحوفة يحتوي على محتوى ضعيف أو محتوى مكرر، فليس لدى Google سبب كبير للإسراع في زحف الصفحات التالية. لهذا تظهر الحالة غالباً بعد نشر مئات الصفحات المتشابهة دفعة واحدة.

5. موقع جديد أو قليل المعرفة

يبدأ نطاق حديث بعدد قليل من الروابط الخلفية ومحتوى جديد كثير بطلب زحف منخفض. قال مولر في جلسة 2022 نفسها إن الموقع الأحدث ذا المحتوى الكثير ينبغي أن يتوقع بقاء جزء كبير منه في هذه الحالة مدة من الزمن.

كيف تشخّص ذلك في Search Console؟

اعمل انطلاقاً من أمثلة قبل تغيير أي شيء. تستغرق هذه الخطوات ساعة تقريباً في معظم المواقع.

1. افتح القائمة. في الفهرسة > الصفحات، انقر "Discovered - currently not indexed" وصدّر الروابط النموذجية (يعرض Search Console حتى 1000 رابط).
2. رتّبها حسب النوع. اجمع الروابط حسب المجلد أو النمط: المنتجات، والمقالات، والروابط ذات المعاملات، والترقيم، والوسوم. إذا كانت أغلبها روابط لا تريد فهرستها، فالحل تقليصها لا دفعها.
3. افحص بعض الصفحات المهمة. تؤكد أداة فحص عنوان URL أن الصفحة لم تُزحف قط، وتبيّن ما إذا وجدها Google في خريطة موقع أو عبر صفحة تحيل إليها.
4. تحقق من جانب الخادم. افتح الإعدادات > إحصاءات الزحف. يعرض تقرير إحصاءات الزحف حالة المضيف خلال 90 يوماً (جلب robots.txt، وتحليل DNS، والاتصال بالخادم)، ونسبة أخطاء 5XX ومهلات الانتظار، ومتوسط زمن الاستجابة. ارتفاع زمن الاستجابة مع انخفاض عدد الطلبات يشير إلى مشكلة في السعة.
5. تحقق من الروابط الداخلية. احسب عدد الروابط الداخلية المؤدية إلى الصفحات المتأثرة ومصدرها. يعرض محلل الروابط الداخلية الصفحات اليتيمة والصفحات المدفونة في عمق البنية.
6. اقرأ سجلات الخادم إن توفرت. تبيّن السجلات الروابط التي يطلبها Googlebot فعلاً كل يوم، وأين يضيّع وقته، وغالباً على روابط ذات معاملات لم تكن تعرف بوجودها.

كيف تصلح "Discovered - currently not indexed"؟

طابق الإصلاح مع السبب الذي وجدته أثناء التشخيص. يلخّص الجدول الحالات الرئيسية.

حسّن سعة الخادم أولاً

إذا أظهر تقرير إحصاءات الزحف أخطاء خادم أو أزمنة استجابة متزايدة، فلن ينفع أي شيء آخر قبل إصلاحها، لأن Google يخفض بنفسه معدل الزحف لحماية الموقع. اسأل مزود الاستضافة عن حدوده، وأضف التخزين المؤقت للصفحات وشبكة توصيل المحتوى، وأزل السكربتات الثقيلة من القوالب.

قلّص الروابط التي لا تحتاجها

كل رابط عديم الفائدة يجلبه Googlebot هو رابط مفيد لا يجلبه. أزل الروابط الداخلية إلى تركيبات الفلاتر ومعاملات التتبع، واستخدم فاحص robots.txt لاختبار قواعد Disallow قبل حظر الأنماط، وأصلح صفحات soft 404. دليل Google واضح بشأن التكرار: احذفه لتركيز الزحف "على المحتوى الفريد بدلاً من الروابط الفريدة".

قوِّ الروابط الداخلية إلى الصفحات المهمة

اربط الصفحات المتأثرة من صفحات يزحفها Google كثيراً: الرئيسية، والفئات الرئيسية، والمقالات الشائعة. استخدم روابط <a href> قياسية بنصوص مرساة وصفية. تُبقي بنية الموقع الواضحة كل صفحة مهمة على بعد ثلاث أو أربع نقرات من الرئيسية، ما يرفع أولوية زحفها.

نظّف خريطة الموقع واطلب الفهرسة باعتدال

أرسل خريطة موقع XML نظيفة، واستخدم زر "طلب الفهرسة" لبعض الروابط الاستراتيجية فقط: فله حصة يومية، ولا يزيد سعة الزحف الإجمالية لموقعك. بعد إصلاح السبب، انقر "التحقق من الإصلاح" في التقرير. يقول Google إن التحقق "يستغرق عادةً حتى نحو أسبوعين، لكنه في بعض الحالات قد يطول كثيراً"، ولا ينبغي أن تنقر مجدداً قبل أن ينجح أو يفشل.

إذا بقيت الصفحات غير مرئية بعد هذه الخطوات، فقد يكون السبب في مكان آخر: قائمة التحقق لدينا حول أسباب عدم ظهور موقع على Google تغطي العقوبات، ووسوم noindex، وأخطاء canonical.

لماذا يهم ذلك للظهور في الذكاء الاصطناعي (GEO)؟

الصفحة التي لا يزحفها Googlebot أبداً لا يمكن أن تحتل مرتبة في Google، ولا يمكن أن تكون مصدراً لـ"نظرة عامة بالذكاء الاصطناعي" أو "وضع الذكاء الاصطناعي" في Google، وهما يعتمدان على فهرس Google. لذلك يؤخر تراكم الزحف ظهورك في النتائج التقليدية وفي إجابات الذكاء الاصطناعي معاً.

تعتمد ChatGPT وPerplexity وClaude على زواحفها الخاصة وفهارس شركائها، فقد تجلب صفحة منها بينما يتجاهلها Google، أو العكس. تبيّن سجلات خادمك أي بوتات الذكاء الاصطناعي تزور أي صفحات؛ ويشرح مدخلنا في المسرد عن سجلات زواحف الذكاء الاصطناعي كيفية قراءتها. تساعد الإصلاحات في هذا الدليل (خادم سريع، وروابط أقل عديمة الفائدة، وروابط داخلية واضحة) كل الزواحف، سواء Googlebot أو بوتات الذكاء الاصطناعي.

تعمل Sorank، منتجنا، على الجانب المتعلق بالمحتوى من المشكلة. تتصل لوحة GEO وSEO بـ Search Console لمتابعة النقرات والظهور والمواقع بعد كل إصلاح، ويصدر مولد المقالات عدداً أقل من المقالات وأعمق، مع روابط داخلية تلقائية إلى الصفحات الموجودة، فتكون الروابط الجديدة مربوطة منذ يوم نشرها.

الخلاصة: "Discovered - currently not indexed" تعني أن Google يعرف رابطك لكنه لم يخصص له وقت زحف بعد. تجاهل الحالة في عدد قليل من الصفحات الجديدة، وتصرف عندما تشمل صفحات مهمة: سرّع الخادم، وقلّص الروابط عديمة الفائدة، واربط الصفحات المهمة. ولأتمتة جزء المحتوى والروابط الداخلية، اطلع على خطط Sorank، بدءاً من 49€ شهرياً مع الدفع السنوي، مع تجربة مجانية لمدة 3 أيام.