“Crawled - currently not indexed”: ما معناه وكيف تصلحه

Crawled - currently not indexed من الأسباب المدرجة تحت “لماذا لا تتم فهرسة الصفحات” في Search Console، وغالبًا ما يكون الأكبر في مواقع المحتوى والمتاجر الإلكترونية. تصف وثائق تقرير فهرسة الصفحات من Google هذه الحالة في جملتين: «تم زحف الصفحة بواسطة Google ولكنها لم تُفهرس. قد تُفهرس في المستقبل أو لا تُفهرس؛ لا حاجة إلى إعادة إرسال هذا الرابط للزحف.» يشرح هذا الدليل ما قرره Google، وأي الروابط يمكن أن تبقى في هذه الحالة، وكيف تجد السبب الحقيقي للروابط المهمة، وأي إصلاح يناسب كل سبب.

ماذا تعني “Crawled - currently not indexed”؟

يعالج Google الرابط في ثلاث مراحل: الاكتشاف والزحف، ثم الفهرسة، ثم الترتيب (تشرح مدخلة قاموسنا عن الزحف والفهرسة كل مرحلة). والصفحة في هذه الحالة اجتازت المرحلة الأولى: طلب Googlebot الصفحة وتلقى ردًا. لكنها توقفت في المرحلة الثانية: بعد معالجة المحتوى، اختار Google ألا يخزنه في فهرسه.

هذا الاختيار متعمد وموثق. يذكر دليل Google حول طريقة عمل البحث أن «الفهرسة غير مضمونة؛ ولا تُفهرس كل صفحة يعالجها Google». ويذكر ثلاثة أسباب شائعة: ضعف جودة المحتوى، وقواعد robots في الوسوم الوصفية التي تمنع الفهرسة، وتصميم للموقع يجعل الفهرسة صعبة. ولأن قاعدة noindex تنتج حالتها الخاصة («مستبعدة بواسطة الوسم “noindex”»)، فإن الصفحة المدرجة كمزحوفة وغير مفهرسة تشير أساسًا إلى السببين الأول والثالث.

ثلاث نقاط تستحق التذكر:

• هذه ليست عقوبة. لا يوجد إجراء يدوي في الموضوع، ولا يُعاقب باقي الموقع بسببها.
• هذه ليست حالة نهائية. يقول Google إن الصفحة «قد تُفهرس في المستقبل أو لا تُفهرس». كل إعادة زحف قرار جديد.
• قد تطال صفحات كانت مفهرسة من قبل. يحذف Google بانتظام الروابط التي لم يعد يرى أنها تستحق الاحتفاظ بها، لذلك قد تنتقل مقالة قديمة إلى هذه الحالة دون أي تغيير من جهتك.

لمعرفة مسار الفهرسة كاملًا والعوامل التي تسرّعه، راجع دليلنا حول فهرسة Google.

الفرق بين Crawled وDiscovered - currently not indexed

الحالتان متشابهتان، لكنهما تتوقفان في مرحلتين مختلفتين، لذلك تحتاجان إلى إصلاحين مختلفين.

باختصار، “Discovered” مشكلة زحف في الأساس، أما “Crawled” فقرار فهرسة في الأساس. تسريع الخادم نادرًا ما ينقل صفحة مزحوفة إلى الفهرس؛ أما تحسين الصفحة نفسها فينقلها.

هل هذه مشكلة، أم يمكن ترك هذه الروابط كما هي؟

لكل موقع بحجم معتبر روابط في هذه الحالة، وكثير منها لا ينبغي أن يحتل ترتيبًا أصلًا. قبل إصلاح أي شيء، رتّب القائمة حسب نوع الرابط. العدد الثابت من الروابط منخفضة القيمة ليس مدعاة للقلق؛ أما الارتفاع المفاجئ أو وجود صفحات مهمة في القائمة فهو كذلك.

لماذا يزحف Google الصفحة دون أن يفهرسها؟

1. يضيف المحتوى القليل جدًا

هذا أكثر الأسباب شيوعًا. الصفحات ذات بضعة أسطر من النص، والمحتوى العام الذي يكرر ما تقوله عشرات الصفحات المفهرسة، أو الصفحات المبنية على قالب لم يتغير فيه سوى الاسم، هي المحتوى الضعيف النموذجي. تسأل إرشادات Google حول إنشاء محتوى مفيد إن كانت الصفحة تقدم «قيمة جوهرية مقارنة بالصفحات الأخرى في نتائج البحث». والصفحة التي لا تجتاز هذا الاختبار قد تُزحف مرارًا دون أن تُفهرس.

2. الصفحة قريبة جدًا من صفحة أخرى

الصفحات شبه المكررة (متغيرات المنتج بالوصف نفسه، وصفحات المدن التي تبدّل اسم المدينة فقط، والنسخ القابلة للطباعة) تُجمّع وتُستبعد غالبًا. وعندما يحدد Google النسخة المكررة بوضوح، تظهر عادة حالة الرابط القانوني؛ وإذا كان التشابه جزئيًا، فقد تقع الصفحة هنا. وسم canonical متسق ومحتوى متميز حقًا يحسمان المسألة.

3. المحتوى لا يوجد إلا بعد تنفيذ JavaScript

تصف أساسيات تحسين JavaScript لمحركات البحث من Google ثلاث مراحل: الزحف والعرض والفهرسة، وتلاحظ أن الصفحة المنتظرة للعرض «قد تبقى في هذا الطابور بضع ثوانٍ، وقد يستغرق الأمر أطول من ذلك». وإذا كان HTML الخام شبه فارغ، وظهر النص بعد العرض فقط (أو فشل العرض لأن نصًا برمجيًا أو استدعاء API مُنع)، فقد يقيّم Google صفحة شبه فارغة. العرض من جهة الخادم أو العرض المسبق يزيل هذا الخطر؛ ويعرض دليلنا حول تحسين JavaScript الخيارات.

4. الموقع يُشير إلى أن الصفحة غير مهمة

الصفحة التي لا يُوصل إليها إلا من خريطة الموقع، أو المدفونة على بعد خمس نقرات مع رابط واحد من أرشيف مقسّم إلى صفحات، تخبر Google أنها لا تعني لك الكثير. والروابط الداخلية من صفحات مفهرسة وتُزار من أقوى الإشارات التي تتحكم فيها.

5. حالات أخرى

تظهر بعض الروابط هنا لأسباب خارج الصفحة: التقرير متأخر (وقد يكون الرابط مفهرسًا بالفعل)، أو زُحف هدف التحويل عبر الرابط القديم، أو أن صفحات الأخطاء الناعمة (نتائج بحث فارغة، «لم يُعثر على منتجات») تُرجع رمز الحالة 200. هذه الحالات تحتاج إلى فحص لا إلى إعادة كتابة.

تشخيص “Crawled - currently not indexed” خطوة بخطوة

1. افتح التقرير. في Search Console، انتقل إلى الفهرسة، ثم الصفحات، وانقر على “Crawled - currently not indexed” ضمن “لماذا لا تتم فهرسة الصفحات”. لاحظ الاتجاه: القفزة المفاجئة تعقب غالبًا نقلًا للموقع، أو تغييرًا للقالب، أو دفعة من الصفحات الجديدة.
2. رتّب الروابط حسب النوع بالجدول أعلاه، واحتفظ فقط بالصفحات التي تريد أن تظهر في نتائج البحث.
3. افحص كل رابط مهم. ألصقه في أداة فحص الرابط. وتأكد من الحالة، وتاريخ آخر زحف، وأن الزحف والفهرسة مسموحان. يمكنك أيضًا اختبار الصفحة في ثوانٍ عبر أداة فحص قابلية الفهرسة المجانية لدينا.
4. استبعد الإنذارات الكاذبة. إذا ظهر «الرابط موجود في Google»، فالتقرير متأخر، والصفحة لا تحتاج إلى شيء.
5. اختبر الرابط المباشر وانظر إلى HTML بعد العرض. إذا كان النص الرئيسي أو الروابط أو العنوان مفقودة في النسخة المعروضة، فالمشكلة في العرض.
6. قارن بالصفحات المرتبة. ابحث عن الاستعلام المستهدف واقرأ النتائج الأولى. إذا كانت تجيب بشكل أكمل أو بصيغة مختلفة، فصفحتك تعاني فجوة في الجودة أو في النية.
7. احسب الروابط الداخلية المؤدية إلى الصفحة، مثلًا باستخدام محلل الروابط الداخلية لدينا. الصفر أو رابط واحد من صفحات عميقة إشارة ضعيفة.

كيف تصلحه: إصلاح واحد لكل سبب

عادتان تجعلان الإصلاحات تدوم. الأولى تدقيق منتظم للمحتوى content audit: تقليم الصفحات الضعيفة أو دمجها يرفع متوسط جودة ما يزحفه Google. والثانية الحفاظ على خريطة موقع XML نظيفة، تضم فقط الروابط القانونية القابلة للفهرسة التي تريد لها أن تترتب، وإعادة إرسالها إلى Google بعد تنظيف واسع.

كم يستغرق فهرسة الصفحة بعد الإصلاح؟

لا يحدث شيء حتى يعيد Googlebot زحف الصفحة، وقد يستغرق ذلك من بضعة أيام إلى عدة أسابيع حسب عدد مرات زيارة Google لموقعك. وبعد إصلاح عدة روابط، يمكنك النقر على «التحقق من الإصلاح» في التقرير؛ ويقول Google إن التحقق «يستغرق عادة نحو أسبوعين، لكنه قد يطول كثيرًا في بعض الحالات». التحقق اختياري: يتحدث التقرير تلقائيًا مع إعادة زحف الصفحات.

في الموقع الكبير، يكون فحص الروابط واحدًا تلو الآخر بطيئًا. تسمح واجهة برمجة فحص الروابط بحسب حدود استخدام واجهة Search Console البرمجية بـ2000 استعلام يوميًا و600 في الدقيقة لكل موقع، وهذا يكفي لمتابعة بضع مئات من الصفحات ذات الأولوية مع الوقت. وإذا بقيت الصفحة في هذه الحالة بعد مرتين أو ثلاث مرات من إعادة الزحف، فالإصلاح لم يكن كافيًا: أعد النظر أولًا في الجودة والنية.

لماذا يهم ذلك للسيو وللظهور في مساعدي الذكاء الاصطناعي؟

الصفحة خارج فهرس Google لا تجلب نقرات عضوية، مهما كانت جودتها. وفي موقع محتوى، فإن نسبة كبيرة من المقالات في هذه الحالة تعني أيضًا جهدًا إنتاجيًا مهدورًا، وتُرسل إشارة إلى Google بأن الموقع ينشر صفحات لا يحتاجها، مما قد يبطئ فهرسة الصفحات الجديدة.

يضيف مساعدو الذكاء الاصطناعي سببًا ثانيًا. تجيب ChatGPT وPerplexity وGemini عن كثير من الأسئلة بجلب صفحات من فهارس بحث الويب، ثم تستشهد بالمصادر التي استخدمتها. والصفحة غير المفهرسة أقل بكثير في احتمال جلبها، وبالتالي أقل في احتمال الاستشهاد بها. تبين دراستنا حول المنصات التي تستشهد بها أنظمة الذكاء الاصطناعي أكثر من غيرها المصادر التي تفضلها عند الإجابة.

Sorank منتجنا: برنامج سيو وGEO يعمل بنظام autopilot. تعرض لوحة GEO وSEO الخاصة به النقرات والظهور والمواقع من Search Console، فترى متى تبدأ الصفحات المصلحة في تلقي الظهور، ويكتب مولّد المقالات مقالات مدعومة بمصادر مع روابط داخلية مدمجة فيها، وهما العنصران اللذان تعاقب عليهما هذه الحالة في أغلب الأحيان.

الخلاصة: رتّب الروابط، وتجاهل ما لا يجب أن يترتب، وأصلح السبب في الصفحات التي تهم (المحتوى، والتكرار، والعرض، والروابط الداخلية) قبل أن تطلب من Google أن ينظر مرة أخرى. لنشر صفحات تُفهرس وتُستشهد بها منذ البداية، راجع خطط Sorank، ابتداءً من 49€ شهريًا، مع تجربة مجانية لمدة 3 أيام.