الفهرسة هي الطريقة التي تحلل وتخزن بها Google صفحاتكم لكي تتمكن من الترتيب. تعرفوا على كيفية عملها، ولماذا يتم تجاوز بعض الصفحات، وكيفية إصلاح ذلك.

الفهرسة هي العملية التي يقوم من خلالها محرك البحث بتحليل محتوى صفحة قام بزحفها، وتخزين تمثيل لها في فهرسه. الفهرس هو قاعدة بيانات ضخمة مستضافة عبر آلاف الأجهزة، وفقط الصفحات المحفوظة فيه مؤهلة للظهور في نتائج البحث. بدون الفهرسة، تكون الصفحة غير مرئية بغض النظر عن مدى جودتها.
هذا يجعل الفهرسة خطوة حاسمة. تقع في منتصف السلسلة التي تمتد من الزحف إلى الفهرسة ثم الترتيب، وأي فشل هنا يعطل كل ما يليه. ومع اعتماد أنظمة الذكاء الاصطناعي بشكل متزايد على المحتوى المفهرس، فإن فهرسة الصفحات أصبحت أيضاً أساسية لـالظهور في البحث عبر الذكاء الاصطناعي.
الفهرسة هي مرحلة التحليل والتخزين في البحث. بعد تنزيل الصفحة، يقوم المحرك بتحليل نصها، وقراءة الوسوم الأساسية مثل العنوان وسمات alt، وفحص الصور والفيديو، ومعرفة موضوع الصفحة. إذا اجتازت الصفحة معيار المحرك، يُصنّف تمثيل لها في الفهرس بحيث يمكن استرجاعها للاستعلامات ذات الصلة.
النقطة الأساسية هي أن الفهرسة ليست تلقائية. تذكر Google بوضوح أن الفهرسة غير مضمونة: ليست كل صفحة تعالجها ستُخزّن. المحرك انتقائي، يحتفظ بالمحتوى الذي يحكم عليه بأنه مفيد ويتجاوز المحتوى الذي لا يراه كذلك.
الزحف والفهرسة خطوتان منفصلتان يسهل الخلط بينهما. الزحف هو الاكتشاف: يعثر روبوت على صفحاتكم ويقوم بتنزيلها عبر تتبع الروابط وقراءة خرائط الموقع. الفهرسة هي الانتقاء: يحلل المحرك المحتوى الذي تم تنزيله ويقرر ما إذا كان سيخزنه. يجب زحف الصفحة قبل أن يتم فهرستها، لكن زحفها لا يضمن فهرستها.
هناك تشبيه مفيد وهو طلب التوظيف. الزحف هو استلام صاحب العمل لسيرتكم الذاتية، بينما الفهرسة هي الحكم بأنكم تستحقون مقابلة. تجتاز صفحات كثيرة الخطوة الأولى وتفشل في الثانية، ولهذا يهم فهم الرابط بين الزحف والفهرسة.
أثناء الفهرسة، تعالج Google محتوى الصفحة وغالباً ما تقوم بعرضه، وتنفيذ JavaScript عند الحاجة بحيث يمكن رؤية المحتوى المعتمد على السكريبت. ثم تجمّع الصفحات المتشابهة لاكتشاف التكرارات وتختار واحدة كنسخة أساسية (canonical)، وهي النسخة المؤهلة للظهور في النتائج، وتعامل الأخريات كبدائل لسياقات محددة.
على طول الطريق، تجمع إشارات مثل اللغة والمنطقة وسهولة الاستخدام، والتي تغذّي مرحلة العرض اللاحقة. قد تُخزّن النسخة الأساسية المختارة والمعلومات المتعلقة بمجموعتها بعد ذلك في الفهرس. لهذا السبب تُعد استراتيجية عنوان URL أساسي نظيفة مهمة: فهي تساعد Google على تخزين النسخة التي تريدون بالفعل ترتيبها.
عدة مشكلات تبقي الصفحات خارج الفهرس. توجيه noindex في وسم meta الخاص بـ robots يخبر Google بشكل صريح بعدم تخزين الصفحة. يمكن للمحتوى الضعيف أو منخفض الجودة أن يفشل في تلبية معايير المحرك. قد تُدمج الصفحات المكررة أو شبه المكررة في نسخة أساسية واحدة، تاركة الأخريات دون فهرسة. وحالة شائعة، "تم اكتشافها لكنها غير مفهرسة حالياً"، تعني أن Google عثرت على الصفحة لكنها حكمت بأنها لا تستحق التخزين بعد.
تضيف المشكلات التقنية إلى القائمة. الاعتماد الكبير على JavaScript الذي لا يستطيع المحرك المُصيّر معالجته، أو الحظر العرضي، أو الربط الداخلي الضعيف، يمكن أن يمنع كل ذلك فهرسة الصفحة. تشخيص هذه المشكلات جزء أساسي من أي تدقيق SEO تقني.
يُعد Google Search Console الأداة الأساسية. يسرد تقرير فهرسة الصفحات عناوين URL المفهرسة وغير المفهرسة، مع سبب لكل استبعاد، بينما تُظهر أداة فحص عناوين URL حالة صفحة واحدة، وآخر زحف لها، والنسخة الأساسية التي اختارتها Google. يعطي بحث سريع في الموقع باستخدام مُعامل site تقديراً تقريبياً لعدد الصفحات المفهرسة.
يمكنكم أيضاً توجيه العملية. استخدموا خرائط مواقع تسرد فقط عناوين URL الأساسية القابلة للفهرسة، وطبّقوا noindex عمداً على الصفحات التي تريدون استبعادها، واضبطوا وسوم canonical لتوحيد التكرارات. فحص هذه العناصر بانتظام في GSC يُبقي نظرة Google لموقعكم دقيقة.
يمكن أن تستغرق إعادة الزحف الطبيعية أياماً أو أسابيع، لذا هناك طرق لتسريع الأمور. طلب الفهرسة عبر أداة فحص عناوين URL يدفع Google للنظر إلى صفحة جديدة أو محدّثة مهمة. تساعد الروابط الداخلية القوية من صفحات مفهرسة بالفعل المحرك على اكتشاف المحتوى الجديد وتقييمه، وتعزز الروابط الخارجية من مواقع موثوقة أهمية الصفحة.
تدعم بعض المحركات أيضاً بروتوكول دفع يُسمى IndexNow، الذي يُخطرها فور تغيّر عنوان URL بدلاً من انتظار الزحف. وقبل كل شيء، يظل نشر محتوى فريد ومفيد حقاً الطريقة الأكثر موثوقية لكسب مكان في الفهرس والحفاظ عليه.
بالنسبة لـ SEO، تُعد الفهرسة البوابة إلى الترتيب. إذا لم تكن أفضل صفحاتكم في الفهرس، فلن تتمكن من الظهور لأي استعلام، لذا فإن مراقبة تغطية الفهرسة مهمة بقدر أهمية إنشاء المحتوى. الموقع الذي يحتوي على صفحات قيّمة كثيرة عالقة دون فهرسة يخسر حركة المرور والموثوقية.
بالنسبة للمحركات التوليدية، تنطبق البوابة نفسها بشكل مواز. تسترجع أنظمة الذكاء الاصطناعي وتستشهد بالمحتوى الذي يمكنها العثور عليه ومعالجته، وهو ما يعكس الفهرسة الكلاسيكية ويُوصف أحياناً بـفهرسة الذكاء الاصطناعي. الصفحات النظيفة والمنظمة جيداً التي تُفهرس بسهولة هي أيضاً الصفحات التي يمكن لنماذج الذكاء الاصطناعي استيعابها، لذا فإن الجمع بين نظافة الفهرسة وبحث الكلمات المفتاحية وتخطيط المحتوى المنضبط يدعم الظهور في العالمين معاً.
الفهرسة هي خطوة التحليل والتخزين التي تحدد ما إذا كانت صفحة تم زحفها ستدخل قاعدة بيانات Google وتصبح مؤهلة للترتيب. وهي انتقائية: يمكن للمحتوى الضعيف والتكرارات وتوجيهات noindex والعوائق التقنية أن تُبقي الصفحات خارجاً، لذا فإن فحص التغطية وإصلاح المشكلات عمل أساسي.
للتعمق أكثر، اربطوا هذا الموضوع بـالزحف والمحتوى المُهيكل، واستخدموا أدوات البحث وتخطيط المحتوى الخاصة بـ Sorank لبناء صفحات تُفهرس وتُرتّب بشكل نظيف. مصادر مرجعية: Google Search Central، CrawlWP، وSEO Kreativ.
الزحف هو الاكتشاف: يعثر روبوت محرك البحث على صفحاتكم ويقوم بتنزيلها عبر تتبع الروابط وقراءة خرائط الموقع. الفهرسة هي الانتقاء: يحلل المحرك ذلك المحتوى ويقرر ما إذا كان سيخزنه في قاعدة بياناته. يجب زحف الصفحة قبل أن تُفهرس، لكن زحفها لا يضمن فهرستها، لأن المحرك قد يحكم بأن الصفحة لا تستحق الاحتفاظ بها.
يعني هذا عادةً أن Google قامت بتنزيل الصفحة لكنها قررت أنها لا تستحق التخزين. تشمل الأسباب الشائعة المحتوى الضعيف أو منخفض القيمة، والصفحات شبه المكررة التي دُمجت في نسخة أساسية واحدة، أو وسم noindex عرضي، أو حكم على الجودة يظهر كـ"تم اكتشافها لكنها غير مفهرسة حالياً". غالباً ما يحل تعزيز المحتوى وتوحيد التكرارات وتحسين الروابط الداخلية هذه المشكلة.
اطلبوا فهرسة الصفحات المهمة عبر أداة فحص عناوين URL في Google Search Console، وتأكدوا من ربطها من صفحات مفهرسة بالفعل. تساعد الروابط الخارجية من مواقع موثوقة أيضاً على الإشارة إلى الأهمية. تدعم بعض المحركات بروتوكول IndexNow لإخطارها فوراً عند تغيّر عنوان URL. الأسلوب الأكثر ديمومة هو نشر محتوى فريد ومفيد حقاً.