AI असिस्टेंट अपने स्रोत कैसे चुनते हैं: RAG, क्वेरी फ़ैन-आउट और उद्धरण के मानदंड

संक्षेप में: AI असिस्टेंट अपने स्रोत दो चरणों में चुनते हैं। पहले वे रिट्रीव करते हैं: मॉडल सवाल को एक या कई वेब सर्च में बदलता है (क्वेरी फ़ैन-आउट) और सर्च इंडेक्स (Google, Bing, Brave या उनका अपना) से उम्मीदवार पेज खींचता है। फिर वे चुनते हैं: मॉडल पैसेज पढ़ता है, जो पैसेज किसी उप-सवाल का साफ़ और प्रमाण वाला जवाब देते हैं उन्हें रखता है, और उन्हें उद्धृत करता है। इसलिए किसी पेज को असिस्टेंट के बॉट के लिए क्रॉल करने योग्य, इंडेक्स में, छिपे हुए उप-क्वेरी से जुड़ा और उद्धृत करने में आसान होना चाहिए, और हर असिस्टेंट अलग तरह की साइटों को पसंद करता है।

AI असिस्टेंट अपने स्रोत कैसे चुनते हैं, यह समझना AI विज़िबिलिटी के किसी भी काम की शुरुआत है। अच्छी बात यह है कि विक्रेता उससे ज़्यादा दस्तावेज़ित करते हैं जितना ज़्यादातर लोग सोचते हैं। Google अपने AI फ़ीचर के दस्तावेज़ में बताता है कि AI Overviews और AI Mode उप-विषयों पर कई संबंधित सर्च चला सकते हैं, और किसी पेज को सहायक लिंक के रूप में दिखाने के लिए सिर्फ़ इंडेक्स में होना और स्निपेट के योग्य होना काफ़ी है। OpenAI, Perplexity, Anthropic और Microsoft अपने असिस्टेंट के लिए मिलते-जुलते नियम प्रकाशित करते हैं। यह गाइड आधिकारिक बातों को इकट्ठा करती है, उन्हें अनुमान से अलग करती है, और जोड़ती है कि हमने 301,025 AI उत्तरों पर क्या मापा।

सवाल और उद्धृत उत्तर के बीच क्या होता है?

वेब एक्सेस वाला लगभग हर असिस्टेंट एक ही पैटर्न पर चलता है, जिसे retrieval-augmented generation (RAG) कहते हैं: मॉडल अकेले अपनी याद से जवाब नहीं देता, पहले दस्तावेज़ खोजता है और फिर उन्हीं से लिखता है। चरण ये हैं।

1. तय करें कि खोजना है या नहीं। स्थिर तथ्य (कोई परिभाषा, गणित का नियम) प्रशिक्षण डेटा से जवाब पाते हैं। कीमतों, उत्पादों, हाल की घटनाओं या किसी नामित कंपनी वाला सवाल सर्च शुरू करता है।
2. दोबारा लिखें और फ़ैन-आउट करें। मॉडल उपयोगकर्ता के वाक्य को एक या कई छोटी क्वेरी में बदलता है, जिनमें से हर एक सवाल के एक पहलू को कवर करती है। इसे query fan-out कहते हैं।
3. उम्मीदवार रिट्रीव करें। हर क्वेरी एक सर्च इंडेक्स को भेजी जाती है, जो पेजों की सूची लौटाता है। केवल वे पेज रिट्रीव हो सकते हैं जो उस इंडेक्स में पहले से हैं।
4. पैसेज पढ़ें और छानें। मॉडल (या कोई फ़िल्टरिंग चरण) नतीजे पढ़ता है और वे पैसेज रखता है जो किसी उप-सवाल का जवाब देते हैं। पेज पैसेज-दर-पैसेज प्रतिस्पर्धा करते हैं, इसीलिए passage ranking पूरे पेज से ज़्यादा मायने रखती है।
5. लिखें और उद्धृत करें। जवाब रखे गए पैसेज से बनता है, और जिन पेजों से वे आए हैं उनके लिंक के साथ।

इससे दो नतीजे निकलते हैं। जो पेज असिस्टेंट के इस्तेमाल किए इंडेक्स में नहीं है, वह चाहे कितना भी अच्छा हो, दौड़ में कभी नहीं आता। और कोई पेज उपयोगकर्ता के ठीक सवाल पर Google में पहले नंबर पर हो सकता है, फिर भी उद्धरण खो सकता है, क्योंकि असिस्टेंट ने कुछ और सर्च किया था।

OpenAI, Google, Perplexity, Anthropic और Microsoft क्या दस्तावेज़ित करते हैं?

इन पाँचों में से कोई भी रैंकिंग फ़ॉर्मूला प्रकाशित नहीं करता। हर एक पहुँच, इंडेक्सिंग और उद्धरण के नियम ज़रूर प्रकाशित करता है, और यही नियम अकेली पक्की ज़मीन हैं।

OpenAI (ChatGPT)

OpenAI का अपने क्रॉलर का दस्तावेज़ तीन एजेंट अलग करता है। OAI-SearchBot सर्च इंडेक्स बनाता है: जो साइटें उसे ब्लॉक करती हैं, वे ChatGPT सर्च उत्तरों में नहीं दिखतीं। GPTBot प्रशिक्षण डेटा इकट्ठा करता है, और उसे ब्लॉक करने का सर्च पर कोई असर नहीं होता। ChatGPT-User उपयोगकर्ता की ओर से पेज देखता है और तय नहीं करता कि सर्च में क्या दिखे। बाकी के लिए, हमारी ChatGPT में रैंक करने वाली गाइड विस्तार से बताती है।

Google (AI Overviews और AI Mode)

Google सबसे स्पष्ट है: AI फ़ीचर वही इंडेक्स और वही क्वालिटी सिस्टम इस्तेमाल करते हैं जो क्लासिक सर्च में हैं, वे संबंधित सर्च का फ़ैन-आउट चला सकते हैं, और दस नीले लिंक से ज़्यादा सहायक लिंक दिखा सकते हैं। जोड़ने के लिए कोई AI-विशेष मार्कअप नहीं है। यानी Google SEO अब भी Google के AI उत्तरों में प्रवेश का टिकट है।

Perplexity

Perplexity के बॉट दस्तावेज़ बताते हैं कि PerplexityBot का काम वेबसाइटों को नतीजों में दिखाना और उनसे लिंक करना है, और इसे फ़ाउंडेशन मॉडल के प्रशिक्षण में इस्तेमाल नहीं किया जाता। Perplexity-User उपयोगकर्ता के सवाल के लिए वास्तविक समय में पेज लाता है। robots.txt में PerplexityBot की अनुमति देना उसके इंडेक्स में होने की शर्त है।

Anthropic (Claude)

Anthropic का वेब सर्च दस्तावेज़ यह चक्र सटीक रूप से समझाता है: Claude प्रॉम्प्ट के आधार पर तय करता है कि कब सर्च करना है, सर्च एक अनुरोध के भीतर कई बार दोहराई जा सकती है, और अंतिम उत्तर में हमेशा उद्धरण होते हैं, जिनमें से हर एक स्रोत के 150 अक्षर तक उद्धृत करता है। Claude मौजूदा कीमतों, हाल की घटनाओं और किसी खास संगठन या उत्पाद की जानकारी के लिए सर्च करता है, और स्थिर ज्ञान का जवाब बिना सर्च के देता है। उसके क्रॉलर और इंडेक्स के बारे में, Claude में रैंक कैसे करें गाइड बताती है।

Microsoft (Copilot)

Copilot Bing पर आधारित है। फ़रवरी 2026 से, Bing Webmaster Tools में एक AI Performance रिपोर्ट है, जो दिखाती है कि Copilot में कोई साइट कितनी बार उद्धृत हुई और किन ग्राउंडिंग क्वेरी ने उसके पेज रिट्रीव किए। उसी घोषणा में Microsoft की सलाह है: कंटेंट को ताज़ा रखें (IndexNow के साथ), स्पष्ट हेडिंग, तालिकाओं और FAQ से संरचित करें, और दावों को डेटा और स्रोतों से पुष्ट करें। Copilot में रैंक करने की गाइड देखें, और xAI के असिस्टेंट Grok के लिए Grok में रैंक करने वाली गाइड भी, जो कम दस्तावेज़ित है।

कौन से मानदंड तय करते हैं कि किसे उद्धृत किया जाए?

आधिकारिक दस्तावेज़ों को उन चीज़ों के साथ जोड़ें जो उत्तरों में देखी जा सकती हैं, तो छह मानदंड ज़्यादातर उद्धरणों को समझाते हैं। पहले दो दस्तावेज़ित ज़रूरतें हैं; बाकी लगातार दिखने वाले पैटर्न हैं।

1. पहुँच और इंडेक्सिंग

असिस्टेंट के सर्च बॉट को अनुमति होनी चाहिए और पेज उस इंडेक्स में होना चाहिए जिसे वह क्वेरी करता है: Gemini और AI Overviews के लिए Google का, Copilot के लिए Bing का, OpenAI और Perplexity के अपने इंडेक्स, Claude के लिए Brave। अपने नियम AI क्रॉलर के लिए robots.txt गाइड से जाँचें।

2. छिपी उप-क्वेरी से मेल

रिट्रीवल उपयोगकर्ता के वाक्य पर नहीं, फ़ैन-आउट क्वेरी पर होता है। जो पेज आम तौर पर “सबसे अच्छा CRM” का जवाब देता है, वह उस पेज से हार सकता है जो “5 लोगों की रियल एस्टेट एजेंसी के लिए CRM, प्रति यूज़र कीमत” का जवाब देता है, क्योंकि असिस्टेंट ने वही सर्च किया था।

3. अकेले उद्धृत करने योग्य पैसेज

असिस्टेंट पैसेज उद्धृत करते हैं। ऐसा सेक्शन जो सीधे जवाब, परिभाषा, तालिका की पंक्ति या क्रमांकित चरण से शुरू होता है, पेज से निकालकर भी समझ में आता है। धुंधली भूमिका नहीं आती।

4. प्रमाण और ताज़गी

Claude ठीक तब सर्च करता है जब जानकारी बदल सकती है, और Microsoft दावों को डेटा और स्रोतों से पुष्ट करने की सलाह देता है। तारीख वाले आँकड़े, नामित स्रोत, किसी दिन “जाँची गई” कीमतें और दिखने वाली अपडेट तारीखें किसी पेज को उद्धृत करने में ज़्यादा सुरक्षित बनाती हैं।

5. दूसरी जगहों से पुष्टि

जो असिस्टेंट एक ही तथ्य कई स्वतंत्र साइटों पर पाता है, वह उसे भरोसे के साथ कह सकता है। इसे entity consensus कहते हैं: समीक्षाएँ, तुलनाएँ, डायरेक्टरी और प्रेस उल्लेख जो आपके ब्रांड को एक ही तरीके से बताते हैं।

6. हर मॉडल किस प्रकार का स्रोत पसंद करता है

हर असिस्टेंट की अपनी आदतें हैं। कुछ विश्वकोश स्रोतों पर टिकते हैं, कुछ वीडियो, फ़ोरम या समीक्षा प्लेटफ़ॉर्म पर। अगला हिस्सा दिखाता है कि ये अंतर कितने बड़े हैं।

हमारे उद्धरण अध्ययन क्या दिखाते हैं?

हमारे प्लेटफ़ॉर्म उद्धरण अध्ययन ने ChatGPT, Gemini, Perplexity, Claude और Grok के 301,025 उत्तरों का विश्लेषण किया, जो अगस्त 2025 और अगस्त 2026 के बीच खरीदारों के सवालों के एक पैनल पर इकट्ठा किए गए (79% फ़्रेंच में पूछे गए)। इसने 131,349 अलग-अलग डोमेन की ओर इशारा करते हुए 1,820,738 AI उद्धरण गिने। स्रोत चुनने के लिए दो नतीजे मायने रखते हैं।

पहला, असिस्टेंट एक जैसी संख्या में स्रोत नहीं उद्धृत करते। Gemini औसतन प्रति उत्तर 11.1 स्रोत नामित करता है, Grok 7.1, ChatGPT 4.1, Claude 3.5 और Perplexity 3.3। आखिरी तीन पर, एक सवाल में तीन या चार स्थान होते हैं, इसलिए दूसरे नंबर का सबसे अच्छा पेज होने का मतलब अक्सर उद्धृत न होना होता है।

दूसरा, पसंदीदा स्रोत प्रकार एक असिस्टेंट से दूसरे में पूरी तरह अलग हैं। Wikipedia ChatGPT के 3.43% उत्तरों में आता है और Claude के 0.03% में; YouTube Gemini के 3.69% उत्तरों में और ChatGPT के 0.04% में। पाँचों मॉडलों द्वारा केवल 6 प्लेटफ़ॉर्म उद्धृत होते हैं। हमारा ChatGPT उद्धरण अध्ययन यह भी दिखाता है कि चयन समय के साथ बदलता है: इस अवधि में ChatGPT प्रति उत्तर 5.8 से 4.1 स्रोत पर आ गया, जून 2026 में 1.7 के निचले स्तर के साथ।

आप उन स्रोतों में कैसे शामिल हों जिन्हें AI असिस्टेंट चुनते हैं?

चयन की प्रक्रिया कार्रवाइयों की एक छोटी सूची में बदलती है, जो Google और AI दोनों के लिए मान्य है।

• दरवाज़े खोलें: OAI-SearchBot, PerplexityBot, Claude-SearchBot, Claude-User, Googlebot और Bingbot की अनुमति दें; जाँचें कि आपका CDN उन्हें ब्लॉक न करे।
• जहाँ मायने रखता है वहाँ इंडेक्स में रहें: Google Search Console और Bing Webmaster Tools, एक साफ़ साइटमैप, तेज़ अपडेट के लिए IndexNow।
• उप-क्वेरी कवर करें: हर सटीक सवाल के लिए एक पेज, उन सर्च से बना जो असिस्टेंट सचमुच चलाते हैं।
• जवाब-पहले पैसेज लिखें: हर सेक्शन के ऊपर सीधा जवाब, तुलनाओं के लिए तालिकाएँ, हर सेक्शन में एक विचार, जैसा कि AI सर्च के लिए कंटेंट ऑप्टिमाइज़ करने की हमारी गाइड में है।
• प्रमाण दें और तारीख लिखें: स्रोत, आँकड़े, लेखक, दिखने वाली अपडेट तारीखें।
• पुष्टि अर्जित करें: उन प्लेटफ़ॉर्म पर समीक्षाएँ और उल्लेख जिन्हें आपके खरीदारों के असिस्टेंट सचमुच उद्धृत करते हैं।

उत्तर एक रन से दूसरे रन में बदलते हैं, इसलिए स्रोत चयन को हफ़्तों में देखना सबसे अच्छा है। Sorank का AI क्वेरी फ़ैन-आउट ट्रैकर दर्ज करता है कि हर असिस्टेंट आपके प्रॉम्प्ट पर कौन सी सर्च चलाता है और समय के साथ उन्हें गिनता है, और AI मेंशन ट्रैकिंग दिखाती है कि आपका ब्रांड उद्धृत हो रहा है या नहीं, और न होने पर कौन से स्रोत वह स्थान ले लेते हैं। AI असिस्टेंट वे पेज चुनते हैं जो उन तक पहुँचे जा सकें, जो उनकी छिपी सर्च से मेल खाएँ और जो अपनी बात को प्रमाणित करें: अपने सवालों पर इन तीनों चीज़ों को मापें, तो आपको पता होगा कि क्या ठीक करना है।