Hogyan működnek a keresőmotorok? Feltérképezés, indexelés, rangsorolás és MI-válaszok

Gyors kvíz

Neked való a SEO, és hogyan kezdd el?

1. kérdés, összesen 425%

Keresik az emberek a Google-ben, amit eladsz?

Igen, szerintem igenNem, új vagy nagyon speciálisNem tudom

A keresőmotorok működésének megértése minden SEO-döntés alapja: amit nem járnak be, azt nem lehet indexelni, és ami nincs indexelve, az sem rangsorolható, és MI-asszisztens sem idézheti. A Google a Google-keresés működésének részletes útmutatójában magyarázza el a folyamatot. Ez a cikk ugyanazokat a szakaszokat követi, hozzáteszi, mit csinál másként a Bing, és megmutatja, mi változik, amikor a ChatGPT, a Gemini vagy a Perplexity kék linkek listája helyett válaszol.

Mi a keresőmotor?

A keresőmotor olyan szoftver, amely a lekérdezésnek megfelelő weboldalakat keresi meg. Két részből áll: egy indexből, amely a már felfedezett és elemzett oldalak adatbázisa, és a rangsorolási rendszerekből, amelyek eldöntik, melyik indexelt oldal válaszol a legjobban a lekérdezésre, és milyen sorrendben. A keresőmotor nem az élő webben keres, amikor lekérdezést írsz be: a saját tárolt másolatában keres. Ezért lehet egy ma reggel közzétett oldal napokig láthatatlan.

A méret magyarázza a legtöbb tervezési döntést. A Google szerint a keresési index több száz milliárd weboldalt tartalmaz, és mérete jóval meghaladja a 100 millió gigabájtot (Google, Hogyan működik a keresés). Egyetlen motor sem tudja naponta újra bejárni mindent, ezért mindegyik rangsorolja, mit töltsön le, mit tartson meg és mit mutasson meg. A Google a legtöbb országban domináns, de a Bing, a Yandex, a Baidu, a Naver és az adatvédelemre épülő motorok ugyanazt a logikát követik, ahogy azt a Google alternatív keresőmotorjairól szóló listánk mutatja.

Hogyan működnek a keresőmotorok lépésről lépésre?

A három klasszikus szakasz könnyebben kezelhető, ha öt lépésre bontjuk, és mindegyiknek megvannak a saját eszközei.

1. lépés: feltérképezés, az oldalak felfedezése

A feltérképezés a felfedezés szakasza. Az automatizált programok, a robotok (a Google-nél a Googlebot, a Bingnél a Bingbot) ismert URL-ekből indulnak ki, és linkeket követve találnak újakat. Olvassák a tulajdonosok által beküldött XML-oldaltérképeket is. A Google szerint a Googlebot algoritmussal dönti el, mely oldalakat járja be, milyen gyakran és hány oldalt tölt le egy webhelyről, és igyekszik nem olyan gyorsan bejárni a webhelyet, hogy az túlterhelje a szervert.

Három dolog akadályozza a feltérképezést: egy tiltó szabály a robots.txt fájlban, a bejelentkezés mögötti oldalak, valamint a szerverhibák vagy időtúllépések. Az eszközök: tiszta belső linkstruktúra árva oldal nélkül, naprakész XML-oldaltérkép, és gyors, stabil szerver. A nagy oldalak a feltérképezési keretet (crawl budget) is kezelik: azt a URL-számot, amelyet egy robot egy adott időszakban hajlandó letölteni az oldalon.

2. lépés: renderelés, az oldal böngészőként való látása

Sok oldal JavaScripttel építi a tartalmát. A Google a Chrome friss verziójával rendereli az oldalakat, így futtatja a szkripteket, és azt látja, amit a látogató. A renderelés erőforrást igényel, késhet, és az a tartalom, amely csak kattintás után jelenik meg, vagy egy meghibásodó szkripttől függ, soha nem látszik. Sok más robot, köztük több MI-robot, egyáltalán nem futtat JavaScriptet: a kulcsfontosságú tartalomnak a kezdeti HTML-ben kell lennie.

3. lépés: indexelés, megértés és tárolás

Az indexelés az elemzés szakasza. A motor elolvassa a szöveget, a címet, a címsorokat, a képeket, a videókat és a strukturált adatokat, majd a hasonló tartalmú oldalakat csoportosítja, és kiválaszt egy reprezentatív URL-t, a kanonikust, amely megjelenhet az eredményekben. Tárolja az oldalról szóló jeleket: nyelv, célország, frissesség, használhatóság. A Google a saját indexét egy könyv végén lévő mutatóhoz hasonlítja: minden általa látott szóhoz bejegyzés tartozik, minden indexelt oldalon.

Az indexelést soha nem lehet garantálni. A Google szerint nem minden feldolgozott oldal kerül be az indexbe: a vékony vagy duplikált tartalom, a noindex utasítás vagy egy nehezen elemezhető dizájn kizárhatja az oldalt. A Google-indexelésről szóló útmutatónk a javításokat tárgyalja, egy ingyenes indexelhetőség-ellenőrző pedig másodpercek alatt megmondja, indexelhető-e egy URL.

4. lépés: rangsorolás, a legjobb válaszok kiválasztása

Amikor lekérdezés érkezik, a motor először értelmezi: helyesírás, szinonimák, nyelv, földrajzi hely és a szavak mögötti szándék (tanulni, összehasonlítani, vásárolni, egy adott oldalra jutni). Ezután jelölt oldalakat keres ki az indexből, és sorba rendezi őket, sok rangsorolási rendszer együttes munkájával. A Google a fő tényezőket a lekérdezés jelentésére, a tartalom relevanciájára, a minőségére, az oldal használhatóságára és a keresés kontextusára bontja, például helyre és beállításokra. Más oldalak linkjei továbbra is a tekintély jelei. A teljes képet a Google rangsorolási tényezőiről szóló elemzésünk mutatja be.

Két pontot gyakran félreértenek. Először: a Google szerint nem fogad el fizetséget azért, hogy gyakrabban járjon be egy oldalt vagy magasabbra rangsoroljon: a hirdetéseket külön árulják, és ennek megfelelően jelölik. Másodszor: a hely és a nyelv sokkal jobban változtatja az eredményeket, mint a személyes böngészési előzmények.

5. lépés: megjelenítés, az eredményoldal összeállítása

Az utolsó lépés összeállítja az eredményoldalt. A tíz kék linkből hirdetések, helyi találatok, képek, videók, „Az emberek ezt is kérdezik” dobozok, kiemelt részletek és sok informatív lekérdezésnél egy AI Overview keveréke lett. A megjelenő cím és leírás a title tag-ből, a meta-leírásból és az oldal tartalmából származik, a strukturált adatok pedig alkalmassá tehetnek egy oldalt gazdag találatokra. Minden formátum külön lehetőség, hogy észrevegyenek.

Miben tér el a Bing a Google-től?

A Bing ugyanazt a feltérképezés, indexelés és rangsorolás modellt követi, néhány gyakorlati különbséggel. A fő különbség az IndexNow, egy protokoll, amely lehetővé teszi, hogy az oldal értesítse a motorokat, amint egy URL hozzáadódik, frissül vagy törlődik, ahelyett hogy a következő feltérképezésre várna. Az IndexNow.org szerint a protokollt a Microsoft Bing, a Naver, a Seznam.cz, a Yandex és a Yep támogatja; a Google nem vezette be. A Bing-eredmények a Microsoft Copilotot is táplálják. A Bing piaci részesedése a legtöbb országban kicsi, de a Bing Webmaster Tools beállítása néhány percet vesz igénybe, és egy második forgalmi és adatforrást nyit meg.

Hogyan találják meg a tartalmat a ChatGPT-hez hasonló MI-asszisztensek és az AI Overviews?

Az MI-válaszok a keresőmotorokra épülnek, nem helyettesítik őket. A legtöbb a visszakeresés-kiegészített generálásra (RAG) támaszkodik: a rendszer egy vagy több keresést futtat, a legrelevánsabb részleteket kikeresi egy webes indexből, majd egy nyelvi modell olyan választ ír, amely ezen források egy részére hivatkozik.

• A Google AI Overviews és az AI Mode a Google saját indexét használja. A Google MI-funkciók és a weboldalad című oldala szerint elég, ha az oldal indexelve van, és alkalmas részletet megjeleníteni; nincs szükség különleges jelölésre vagy MI-szövegfájlra. Ezek a funkciók „query fan-out” (lekérdezés-szétágazás) módszert használnak: több, egymással összefüggő résztémára vonatkozó keresést futtatnak, hogy alátámasztó oldalakat gyűjtsenek.
• A ChatGPT keresése az OpenAI OAI-SearchBot robotjával keres oldalakat. Az OpenAI robotdokumentációja szerint azokat az oldalakat, amelyek blokkolják az OAI-SearchBotot, kizárják a ChatGPT-keresés válaszaiból, a GPTBot pedig külön robot, amelyet modelltanításra használnak.
• A Gemini, a Perplexity és a Claude szintén a webes visszakeresést kombinálja a generálással: a Gemini a Google-keresésre támaszkodik, a Perplexity és a Claude pedig saját robotjait (PerplexityBot, Claude-SearchBot) küldi az oldalakra, amelyeket idézhetnek.

Ebből következik: a klasszikus szakaszok továbbra is eldöntik az MI-láthatóságot. Az az oldal, amelyet nem lehet bejárni, hiányzik az indexből, vagy mélyen a rangsorban van, kicsi eséllyel kerül visszakeresésre, így idézésre sem. Ami változik, az a végső választás: az MI egész oldalak helyett részleteket választ ki, és a világos definíciókat, a forrásolt számokat és a közvetlen válaszokat részesíti előnyben. A ChatGPT által idézett forrásokról szóló tanulmányunk megmutatja, melyik típusú oldalak nyerik meg ezeket az idézéseket.

Mit szabályozhatsz az egyes szakaszokban?

Rendezd sorba a szakaszokat, és olyan ellenőrzőlistát kapsz, amely a Google-re, a Bingre és az MI-asszisztensekre egyaránt működik:

1. Engedd be a megfelelő robotokat. Ellenőrizd a robots.txt-t véletlen tiltó szabályokra, és tudatosan döntsd el, mely MI-robotokat engedélyezed.
2. Tedd minden fontos oldalt elérhetővé három kattintáson belül a belső linkeken keresztül, és vedd fel az oldaltérképbe.
3. Szolgáltass tartalmat a HTML-ben, ne csak JavaScripten keresztül, gyors és stabil szerverválaszokkal.
4. Adj minden témának egy kanonikus URL-t, és kerüld a majdnem azonos oldalakat, amelyek szétosztják a jeleket.
5. Igazodj a keresési szándékhoz. Abból indulj ki, amit az emberek beírnak, amit a kulcsszókutatás feltár, és válaszolj rájuk az oldal első sorai között.
6. Szerezz tekintélyt releváns oldalak linkjeivel és említéseivel.
7. Írj idézhető részleteket: egy definíciót, egy számot a forrásával, lépések rövid listáját.
8. Mérd mindkét csatornát: a Search Console-t a Google-höz, az MI-említések követését pedig ahhoz, hogy lásd, idézi-e a ChatGPT, a Gemini vagy a Claude a márkádat.

Hogyan változtak a keresőmotorok az idők során?

Az 1990-es évek korai motorjai főleg kulcsszóillesztéssel rangsoroltak, ami könnyen manipulálható volt. A Google PageRankje, amely a linkeket szavazatként kezelte, sokkal nehezebbé tette a rangsorok kijátszását, az elkövetkező évtizedek pedig nyelvi megértést adtak hozzá gépi tanulási modellekkel, például a BERT-tel, a mobilelső indexeléssel, a spamszűréssel és a minőségi rendszerekkel. A Google története egyenletes mintát mutat: minden nagy változtatás az embereknek készült oldalakat jutalmazta, és a rövidítéseket büntette. A generatív válaszok a legutóbbi lépés, és ugyanazt jutalmazzák: világos, megbízható, jól strukturált tartalmat.

A feltérképezéstől a forgalomig: honnan kezdj

A keresőmotorok azokat az oldalakat jutalmazzák, amelyeket be tudnak járni, meg tudnak érteni és meg tudnak bízni bennük, az MI-asszisztensek pedig azokat az oldalakat idézik, amelyeket a keresőmotorok már rangsorolnak. Előbb a hozzáférést javítsd, utána az indexelést, aztán a relevanciát és a tekintélyt. Hogy ez hetről hetre működjön, a Sorank megtalálja a kulcsszavaidat, forrásokkal és belső linkekkel ellátott, optimalizált cikkeket tesz közzé, és autopilot módban követi, hogy a ChatGPT, a Gemini és a Claude idézi-e a márkádat.