كيف ترسل موقعك إلى محركات البحث: Google وBing وIndexNow والذكاء الاصطناعي

يعني إرسال موقعك إلى محركات البحث إبلاغها بأن موقعك وصفحاته موجودة، عبر أدوات مشرفي المواقع أو خريطة الموقع أو بروتوكول إشعار. ولا يضمن ذلك الفهرسة ولا الترتيب. تنبّه وثائق Google حول طلب إعادة الزحف إلى عناوين URL إلى أن الزحف قد يستغرق من بضعة أيام إلى بضعة أسابيع. يتناول هذا الدليل كل محرك والأدوات المناسبة وما يجب فعله من أجل ChatGPT ومساعدي الذكاء الاصطناعي الآخرين.

هل ما زال إرسال الموقع إلى محركات البحث ضروريًا؟

بالمعنى الدقيق، لا. تكتشف محركات البحث الصفحات بالزحف عبر الروابط: بمجرد أن يضع موقع آخر مفهرس رابطًا إلى موقعك، تصل إليه الزواحف. ومع ذلك يستحق الإرسال الدقائق العشر التي يتطلبها، لثلاثة أسباب:

• الموقع الجديد بلا روابط خلفية قد ينتظر أسابيع قبل أن يعثر عليه زاحف بالصدفة.
• أدوات مشرفي المواقع تكشف الأعطال: صفحات مستبعدة من الفهرس، وأخطاء خادم، وموارد محظورة، وإجراءات يدوية. بدونها تعمل دون رؤية.
• الصفحات الجديدة والمحدثة تُلتقط أسرع عندما تخبر خريطة الموقع أو إشعارٌ المحركَ بأنها تغيرت.

لا يغني الإرسال عن الأساسيات: يجب أن تكون الصفحات قابلة للزحف، وأن تعيد رمز الحالة 200، وألا تحمل وسم noindex، وأن تقدم محتوى يستحق الفهرسة. إذا بقيت الصفحات المرسلة غائبة، فإن دليلنا حول مشكلات الفهرسة في Google يشرح خطوات التشخيص.

كيف ترسل موقعك إلى Google؟

1. إضافة الموقع والتحقق منه في Search Console

أنشئ موقعًا (property) في Google Search Console. يغطي موقع النطاق جميع النطاقات الفرعية والبروتوكولات (http وhttps، مع www وبدونها) ويُتحقق منه بسجل DNS لدى مسجّل النطاق. أما موقع بادئة URL فيغطي نسخة واحدة من الموقع ويقبل طرقًا أخرى: ملف HTML أو وسم meta أو Google Analytics أو Google Tag Manager. تشرح معظم أنظمة إدارة المحتوى وشركات الاستضافة كيفية إضافة سجل DNS في دقائق.

2. إرسال خريطة الموقع XML

تسرد خريطة الموقع XML عناوين URL التي تريد فهرستها. تنشئها WordPress وShopify وWebflow وWix تلقائيًا (غالبًا على العنوان /sitemap.xml)؛ وإلا فإن مولّد خرائط المواقع ينشئها لك. في Search Console افتح Sitemaps والصق العنوان وأرسله. تحدد وثائق Google حول خرائط المواقع الحد الأقصى بـ50,000 عنوان URL أو 50 ميغابايت غير مضغوطة لكل ملف (تستخدم المواقع الكبيرة فهرسًا لخرائط المواقع)، وتصف الإرسال بأنه مجرد تلميح: يساعد على الاكتشاف لكنه لا يضمن شيئًا. أضف أيضًا سطر Sitemap: إلى ملف robots.txt، فجميع المحركات الكبرى تقرؤه.

3. طلب فهرسة الصفحات الرئيسية

لعدد قليل من الصفحات المهمة (صفحة رئيسية جديدة، أو إطلاق، أو مقال مصحح)، الصق العنوان في أداة فحص عنوان URL وانقر على طلب الفهرسة. يطبق Google حصة على هذه الطلبات ويوضح أن تكرار طلب العنوان نفسه لن يسرّع الزحف إليه. لأكثر من بضعة عناوين، اعتمد على خريطة الموقع.

4. مراجعة تقرير الصفحات بعد بضعة أيام

يعرض تقرير الصفحات العناوين المفهرسة وأسباب استبعاد غيرها (صفحات زحف إليها Google لكنها غير مفهرسة حاليًا، ونسخ مكررة دون عنوان أساسي اختاره المستخدم، وصفحات محظورة في robots.txt، وغير ذلك). يؤكد مدقق قابلية الفهرسة المجاني خلال ثوانٍ ما إذا كانت صفحة معينة قابلة للفهرسة أصلًا.

لماذا تبقى صفحة مرسلة غائبة عن Google؟

الإرسال يضع العنوان في قائمة الانتظار فقط. عندما تبقى صفحة خارج الفهرس، يكون السبب في الغالب أحد ما يلي:

1. زحف محظور: قاعدة Disallow في robots.txt، موروثة غالبًا من بيئة الاختبار.
2. توجيه noindex في وسم meta robots أو في ترويسة HTTP المسماة X-Robots-Tag.
3. وسم canonical يشير إلى مكان آخر ويطلب من Google فهرسة عنوان مختلف.
4. محتوى مكرر أو ضعيف: يزحف Google إلى الصفحة لكنه يقرر أنها لا تضيف شيئًا إلى الصفحات المفهرسة.
5. إشارات اكتشاف ضعيفة: صفحة يتيمة بلا روابط داخلية، على نطاق حديث بلا روابط خلفية.
6. أخطاء خادم أو استجابات بطيئة، تدفع الزواحف إلى الإبطاء أو التوقف.

تُصلح الأسباب الثلاثة الأولى في دقائق بعد اكتشافها. أما الثلاثة الأخيرة فتتطلب عملًا على المحتوى والربط الداخلي لا تغني عنه أي أداة إرسال.

كيف ترسل موقعك إلى Bing وYahoo وDuckDuckGo؟

أنشئ حسابًا في Bing Webmaster Tools. أسرع طريق هو خيار الاستيراد: يقرأ Bing مواقعك المُتحقق منها وخرائطها من Google Search Console، فلا حاجة إلى تحقق ثانٍ. تأكد بعد ذلك من قراءة خريطة الموقع، واستخدم URL Submission للصفحات العاجلة.

تتجاوز أهمية Bing حصته من عمليات البحث. نتائج Yahoo مصدرها Bing، وDuckDuckGo لا يقدم أي أداة إرسال، لذا فإن الموقع المفهرس جيدًا في Bing مغطى في هذه المحركات. ويغذي فهرس Bing أيضًا منتجات ذكاء اصطناعي، كما يوضح القسم المخصص للذكاء الاصطناعي أدناه. ولخيارات المستخدمين الأخرى، راجع عرضنا حول محركات البحث البديلة لـGoogle.

ما هو IndexNow وما محركات البحث التي تستخدمه؟

IndexNow بروتوكول مفتوح يتيح للموقع إبلاغ محركات البحث لحظة إضافة عنوان URL أو تعديله أو حذفه، بدل انتظار الزحف التالي. وفق الوثائق الرسمية لـIndexNow، تتفق المحركات المشاركة على أن العنوان المرسل إلى أحدها يُشارك تلقائيًا مع جميع المحركات الأخرى، ويمكن أن يحمل طلب واحد ما يصل إلى 10,000 عنوان. المحركات المشاركة المدرجة في indexnow.org هي Microsoft Bing وNaver وSeznam.cz وYandex وYep. وليس Google من بينها.

يستغرق الإعداد بضع دقائق: أنشئ مفتاحًا، واستضفه كملف نصي في جذر الموقع، ثم أرسل العناوين إلى الواجهة البرمجية. تقدم منصات وشبكات توصيل محتوى كثيرة IndexNow كخيار مدمج أو كإضافة، فتُبلغ المحركات تلقائيًا عند كل نشر أو تحديث.

كيف ترسل موقعك إلى محركات البحث الأخرى؟

خارج السوق الناطقة بالإنجليزية، تملك المحركات المحلية لوحات تحكم خاصة بها. يلخص الجدول أين تتوجه:

تتحقق كل لوحة من الملكية بطريقة مشابهة (وسم meta أو ملف أو DNS) وتقبل خريطة موقعك. قبل الإرسال، افحصها بـمدقق خرائط المواقع: خريطة مليئة بالتحويلات وأخطاء 404 والعناوين غير الأساسية تهدر وقت الزحف في جميع المحركات دفعة واحدة.

كيف يجد ChatGPT وPerplexity ومساعدو الذكاء الاصطناعي الآخرون موقعك؟

لا يوجد نموذج لإرسال موقع إلى ChatGPT أو Claude أو Gemini أو Perplexity. يصلون إلى صفحاتك بطريقتين: عبر زواحف الذكاء الاصطناعي الخاصة بهم، وعبر فهارس البحث التي يستعلمونها في الوقت الفعلي.

• اسمح لزواحف البحث في robots.txt. تذكر وثائق OpenAI حول زواحفها أن المواقع التي تحظر OAI-SearchBot لن تظهر في إجابات ChatGPT search. أما حظر GPTBot فقرار منفصل يخص تدريب النماذج فقط. راجع ملف robots.txt وقواعد جدار الحماية بالنسبة إلى OAI-SearchBot وPerplexityBot وClaudeBot.
• كن مفهرسًا في Bing وGoogle. يذكر مركز مساعدة OpenAI أن ChatGPT search يعمل مع مزودي بحث خارجيين، ويُشار على نطاق واسع إلى Bing بوصفه أحدهم؛ ويعتمد Gemini وAI Overviews على فهرس Google. الفهرسة الجيدة في المحركين هي أساس الظهور في الذكاء الاصطناعي.
• قدّم المحتوى في HTML. معظم زواحف الذكاء الاصطناعي لا تنفذ JavaScript: النص الذي لا يظهر إلا بعد تشغيل السكربتات لا يُقرأ.
• فكّر في ملف llms.txt. هو مقترح من المجتمع يلخص صفحاتك الرئيسية لنماذج اللغة؛ لا يعرضه أي مزود ذكاء اصطناعي كبير كشرط، لكن تكلفته قليلة. ينشئه لك مولّد llms.txt الخاص بنا.

لمعرفة ما إذا كانت هذه الجهود تؤتي ثمارها، انظر إلى الإجابات نفسها. تتابع خدمة تتبع الإشارات في الذكاء الاصطناعي من Sorank مجموعة من الأسئلة (prompts) في ChatGPT وClaude وGemini (بالإضافة إلى Perplexity وGrok ابتداءً من خطة Pro)، وتُظهر ما إذا كانت علامتك مذكورة ومن يُذكر بدلًا منها.

هل يجب الدفع لخدمة إرسال إلى محركات البحث؟

لا. الخدمات التي تعد بإرسال موقعك إلى «500 محرك بحث» مقابل رسوم تبيع شيئًا تستطيع فعله مجانًا في أقل من ساعة، ومعظم المحركات في قوائمها لا تكاد تستقبل زيارات. المحركات المهمة (Google وBing وأعضاء IndexNow) توفر أدوات مجانية. وينطبق الأمر نفسه على العروض المدفوعة لـ«الفهرسة الفورية»: لا يستطيع أي طرف ثالث إجبار Google على فهرسة صفحة. ما يحدد الفهرسة هو جودة الصفحة وروابطها الداخلية والروابط التي تحصل عليها من مواقع أخرى.

إرسال موقع يستغرق أقل من ساعة: تحقق منه في Google Search Console وBing Webmaster Tools، وأرسل خريطة الموقع، وفعّل IndexNow، وافتح robots.txt لزواحف البحث في الذكاء الاصطناعي. بعد ذلك ينتقل العمل إلى نشر صفحات تستحق الفهرسة والاقتباس. يكتب Sorank مقالات السيو وGEO وينشرها بنظام autopilot، مع ربط داخلي ومصادر، لتمنح كل صفحة جديدة محركات البحث ومساعدي الذكاء الاصطناعي سببًا للعودة.