GEO teknis di 2026: akses crawler AI, render sisi server, llms.txt, data terstruktur, kecepatan, dan kebaruan, dengan daftar periksa agar dikutip oleh AI.

Di halaman ini
Singkatnya
GEO teknis adalah kumpulan pengaturan situs yang memungkinkan asisten AI seperti ChatGPT, Claude, Perplexity, dan Gemini mengambil, membaca, serta mengutip halaman Anda. Intinya ada enam pemeriksaan: izinkan crawler pencarian AI masuk (robots.txt, firewall, CDN), sajikan konten utama di HTML awal karena sebagian besar crawler AI tidak menjalankan JavaScript, jaga halaman tetap cepat dan bebas galat, tambahkan data terstruktur yang sesuai dengan teks yang terlihat, terbitkan berkas llms.txt sebagai tambahan berbiaya rendah, dan tunjukkan kebaruan dengan tanggal yang akurat serta sitemap. Tidak ada yang menjamin kutipan, tetapi kegagalan pada salah satu poin ini akan mengeluarkan halaman Anda dari daftar kandidat.
Ingin tahu lebih banyak? Tanyakan kepada
Kuis singkat
Bagaimana agar disebut oleh ChatGPT dan AI lainnya?
Sorank cocok dengan jawaban Anda
Coba selama 3 hari di situs Anda sendiri dan lihat posisi Anda di Google, ChatGPT, dan AI lainnya.
Mulai uji coba gratis 3 hari3 hari gratis, lalu berhenti kapan saja. Garansi hasil atau uang kembali 90 hari.
GEO teknis adalah sisi infrastruktur dari generative engine optimization: semua yang terjadi sebelum model AI menilai apakah konten Anda layak dikutip. Konten dan otoritas menentukan siapa yang dikutip, tetapi halaman yang tidak dapat dijangkau crawler AI, atau yang hanya terbaca sebagai cangkang JavaScript kosong, tidak pernah masuk ke persaingan. Google sendiri merangkum dasar untuk fitur AI-nya: halaman harus terindeks dan memenuhi syarat untuk cuplikan, dan untuk AI Overviews atau AI Mode tidak ada persyaratan teknis tambahan. Asisten AI lain menjalankan crawler sendiri, dengan batasannya sendiri, dan di situlah banyak situs kehilangan visibilitas tanpa menyadarinya. Panduan ini membahas setiap lapisan, dari akses bot hingga kebaruan, dengan daftar periksa yang bisa Anda selesaikan dalam satu sore.
SEO teknis membuat situs dapat dirayapi dan diindeks untuk Googlebot. GEO teknis memperluas pekerjaan yang sama ke belasan bot lain yang berperilaku berbeda: mereka merender lebih sedikit, merayapi lebih jarang, dan mengikuti lebih sedikit aturan. Tumpang tindihnya besar (kode status, canonical, sitemap, kecepatan), sehingga situs dengan SEO teknis yang baik sudah memiliki sebagian besar fondasinya. Perbedaannya ada di empat tempat.
| Topik | SEO teknis (Googlebot) | GEO teknis (crawler AI) |
|---|---|---|
| Bot yang perlu dikelola | Googlebot, Bingbot | OAI-SearchBot, GPTBot, ChatGPT-User, Claude-SearchBot, ClaudeBot, Claude-User, PerplexityBot, Google-Extended, dan lainnya |
| JavaScript | Dirender, dengan jeda | Tidak dijalankan oleh sebagian besar crawler AI |
| Satuan nilai | Halaman dan peringkatnya | Bagian teks yang dikutip dalam jawaban |
| Logika pengecualian | Memblokir atau memberi noindex pada halaman | Pilihan terpisah untuk pelatihan, pencarian, dan kunjungan yang dipicu pengguna |
| Pengukuran | Search Console | Log server dan pelacakan prompt |
Konsekuensi praktisnya: sebuah situs bisa berperingkat baik di Google dan tetap tidak terlihat oleh ChatGPT atau Claude, karena kontennya dibangun dengan JavaScript atau karena aturan firewall memblokir bot yang tidak dikenal.
Setiap perusahaan AI kini menjalankan beberapa bot, dan masing-masing punya tugas berbeda. Memblokir bot yang salah bisa membuat Anda hilang dari jawaban AI, padahal Anda hanya ingin menolak pelatihan model.
Menurut dokumentasi crawler OpenAI (diperiksa Oktober 2026), OAI-SearchBot menentukan apakah halaman Anda muncul dalam jawaban pencarian ChatGPT, GPTBot mengumpulkan konten yang mungkin dipakai untuk melatih model, dan ChatGPT-User mengambil halaman ketika pengguna memintanya. Memblokir GPTBot menjaga konten Anda tetap di luar pelatihan tanpa menghapus Anda dari pencarian ChatGPT. Perubahan robots.txt membutuhkan sekitar 24 jam untuk berlaku di hasil pencarian, dan aturan robots.txt mungkin tidak berlaku untuk ChatGPT-User karena kunjungannya dipicu oleh seseorang.
Anthropic memakai pembagian tiga jenis yang sama, seperti yang dijelaskan pusat bantuannya: ClaudeBot untuk pelatihan, Claude-SearchBot untuk pengindeksan pencarian, dan Claude-User untuk halaman yang diambil selama percakapan. Memblokir Claude-SearchBot atau Claude-User mengurangi visibilitas Anda dalam jawaban Claude. Anthropic juga memperingatkan bahwa memblokir alamat IP-nya bukan cara opt-out yang andal, karena bot mungkin tidak bisa membaca robots.txt Anda sama sekali.
AI Overviews dan AI Mode dari Google memakai indeks Googlebot biasa. Token Google-Extended hanya mengendalikan penggunaan konten Anda untuk pelatihan dan grounding Gemini serta beberapa sistem Google lainnya, dan Google menyatakan hal itu tidak memengaruhi penyertaan atau peringkat di Google Penelusuran. Perplexity memakai PerplexityBot untuk indeksnya. Untuk konfigurasi siap pakai per bot, lihat panduan kami tentang aturan robots.txt untuk crawler AI dan daftar crawler AI beserta user agent-nya.
| Tujuan | Izinkan | Opsional untuk diblokir |
|---|---|---|
| Dikutip di ChatGPT | OAI-SearchBot, ChatGPT-User | GPTBot (hanya pelatihan) |
| Dikutip di Claude | Claude-SearchBot, Claude-User | ClaudeBot (hanya pelatihan) |
| Dikutip di Perplexity | PerplexityBot | Tidak ada |
| Muncul di AI Overviews dan AI Mode | Googlebot | Google-Extended (tidak berpengaruh pada Penelusuran) |
Perhatian
robots.txt hanya separuh dari pemeriksaan. Sejak Juli 2025, Cloudflare memblokir crawler AI secara default pada banyak konfigurasi, dan firewall serta alat perlindungan bot lain melakukan hal yang sama. Periksa CDN dan pengaturan keamanan Anda, lalu pastikan di log server bahwa bot pencarian AI menerima kode 200.
Umumnya tidak, dan ini kegagalan GEO teknis yang paling sering terjadi. Sebuah analisis Vercel terhadap jaringannya (Desember 2024) menemukan bahwa tidak ada satu pun crawler AI besar yang merender JavaScript: bot milik OpenAI, Anthropic, Meta, ByteDance, dan Perplexity mengunduh HTML mentah lalu berhenti di situ. ChatGPT dan Claude memang mengambil berkas JavaScript, tetapi tidak menjalankannya. Gemini adalah pengecualian karena mengandalkan infrastruktur render Googlebot. Studi yang sama mengukur skala lalu lintas ini: dalam sebulan, GPTBot membuat 569 juta permintaan dan Claude 370 juta, dibandingkan 4,5 miliar untuk Googlebot.
Jika deskripsi produk, harga, artikel, atau FAQ Anda disisipkan oleh aplikasi React, Vue, atau Angular setelah halaman dimuat, crawler AI hanya melihat templat kosong. Solusinya adalah menyajikan konten inti dalam respons HTML awal:
Tes cepat: buka kode sumber halaman (bukan inspektor) atau ambil URL dengan curl. Jika paragraf utama Anda tidak ada di HTML mentah, crawler AI tidak dapat mengutipnya. Panduan kami tentang SEO JavaScript membahas opsi render framework demi framework, dan audit gratis keterjangkauan crawl untuk AI memeriksa apa yang diterima bot.
Asisten AI yang menelusuri web secara real time mengambil beberapa halaman per pertanyaan dan bekerja dengan batas waktu yang ketat. Halaman yang lambat atau rusak dilewati, dan sumber lain yang dikutip. Studi Vercel juga menemukan bahwa crawler ChatGPT dan Claude menemui halaman 404 pada sekitar 34% permintaannya, dibandingkan 8% untuk Googlebot, sering kali karena meminta URL yang sudah usang. Tiga poin ini yang paling penting:
Tabel layak disebut tersendiri: data perbandingan dalam tabel HTML mudah diekstrak, sedangkan data yang sama dalam gambar atau bagan canvas hilang bagi setiap crawler AI.
Data terstruktur membantu mesin mengenali apa isi sebuah halaman (artikel, produk, organisasi, orang) dan menghubungkannya dengan entitas yang dikenal. Google jelas: tidak diperlukan skema khusus untuk fitur AI-nya, dan markup harus sesuai dengan teks yang terlihat. Nilainya untuk GEO teknis terletak pada kejelasan, bukan dorongan peringkat. Jenis yang layak diterapkan di sebagian besar situs:
Simpan JSON-LD di HTML awal, jangan disisipkan oleh tag manager, demi alasan JavaScript yang sama seperti di atas. Audit data terstruktur untuk LLM memeriksa markup Anda terhadap apa yang bisa dibaca model, dan artikel kami tentang data terstruktur untuk pencarian AI menjelaskan jenis mana yang masih penting.
Tips
Tulis fakta kunci yang sama (nama perusahaan, tahun berdiri, harga, lokasi) secara identik di teks yang terlihat, di skema, dan di profil resmi Anda. Fakta yang konsisten di semua sumber membantu model menggambarkan merek Anda tanpa mencampurnya dengan merek lain.
usulan llms.txt, yang dipublikasikan oleh Jeremy Howard pada September 2024, adalah berkas Markdown di direktori akar situs yang mencantumkan halaman paling berguna dengan deskripsi singkat, sehingga agen AI menemukan konten yang tepat tanpa menguraikan menu navigasi. Ini adalah usulan, bukan standar resmi: ia tidak mengendalikan akses maupun pengindeksan, dan Google tidak memasukkannya ke dalam persyaratan fitur AI-nya. Anggaplah ini tambahan berbiaya rendah: butuh kurang dari satu jam, membantu agen dan asisten pemrograman yang mencarinya, dan memaksa Anda memutuskan halaman mana yang mewakili situs Anda. Anda bisa menyusun draf dengan generator llms.txt, dan menyediakan versi Markdown yang bersih untuk halaman kunci jika sistem Anda memungkinkan.
Asisten AI yang mencari di web lebih memilih sumber yang baru dan berpenanggalan untuk pertanyaan apa pun yang waktunya penting (harga, alat, aturan, statistik). Kebaruan konten sebagian merupakan urusan editorial, tetapi sinyalnya bersifat teknis:
| Pemeriksaan | Cara memverifikasi | Prioritas |
|---|---|---|
| Bot pencarian AI diizinkan di robots.txt | Baca robots.txt untuk OAI-SearchBot, Claude-SearchBot, PerplexityBot | Tinggi |
| Tidak ada pemblokiran oleh firewall atau CDN | Log server menunjukkan respons 200 untuk bot AI | Tinggi |
| Konten utama ada di HTML mentah | Lihat sumber halaman atau curl URL-nya | Tinggi |
| Halaman kunci terindeks di Google dan Bing | Search Console dan Bing Webmaster Tools | Tinggi |
| Status 200, pengalihan satu lompatan | Rayapi dengan crawler SEO | Sedang |
| Judul, daftar, dan tabel semantik | Baca kerangka HTML | Sedang |
| Skema Organization dan Article | Validator skema | Sedang |
| Tanggal yang terlihat dan lastmod yang akurat | Bandingkan halaman, skema, dan sitemap | Sedang |
| llms.txt di akar situs | Buka /llms.txt | Rendah |
Jalankan sekali pada 20 halaman terpenting Anda, lalu setelah setiap desain ulang, perubahan CMS, atau pembaruan keamanan. Log crawler AI adalah satu-satunya bukti langsung bahwa bot mencapai halaman Anda; semua yang lain adalah perkiraan.
Perbaikan teknis membuka pintu; hasilnya muncul dalam jawaban AI. Dua pengukuran menutup siklusnya. Pertama, log server: kunjungan dari OAI-SearchBot, Claude-SearchBot, dan PerplexityBot seharusnya meningkat pada halaman yang sudah Anda perbaiki. Kedua, kutipan: lacak sekumpulan pertanyaan tetap yang diajukan pelanggan Anda dan periksa, minggu demi minggu, apakah merek Anda disebut dan sumber mana yang dikutip sebagai gantinya. Pola dari sampel besar membantu menetapkan ekspektasi, seperti dalam studi kutipan ChatGPT kami.
Sorank, perangkat lunak kami, menangani bagian kedua ini dengan pelacakan penyebutan AI: 10 - 50 prompt yang dilacak tergantung paket, di ChatGPT, Claude, dan Gemini, ditambah Grok mulai dari paket Pro, dengan tingkat visibilitas Anda dan pesaing yang dikutip sebagai gantinya.

Setelah fondasi teknisnya bersih, batas berikutnya adalah konten: halaman yang menjawab pertanyaan dengan jelas, disertai sumber. Generator artikel menulis dan mempublikasikan artikel yang dioptimalkan untuk Google dan AI secara otomatis, dengan tautan internal dan sumber.
GEO teknis menentukan apakah asisten AI dapat membaca situs Anda; konten dan otoritas menentukan apakah mereka mengutipnya. Perbaiki dulu akses, render, dan struktur, lalu ukur kutipannya. Paket dan uji coba gratis 3 hari ada di halaman harga.
Memblokir GPTBot hanya memberi tahu OpenAI agar tidak memakai konten Anda untuk melatih modelnya. Situs Anda tidak hilang dari jawaban pencarian ChatGPT, yang bergantung pada OAI-SearchBot. Jika Anda ingin dikutip di ChatGPT, biarkan OAI-SearchBot tetap diizinkan, apa pun keputusan Anda tentang GPTBot.
Tidak. Google menyatakan bahwa AI Overviews dan AI Mode tidak memiliki persyaratan teknis selain halaman yang terindeks dan memenuhi syarat untuk cuplikan di Penelusuran. llms.txt dapat membantu agen AI lain menemukan halaman kunci Anda, tetapi tidak berpengaruh pada peringkat Google maupun AI Overviews.
AEO (optimasi untuk mesin jawaban) dan GEO menggambarkan tujuan yang sama: dikutip dalam jawaban yang dihasilkan asisten AI. GEO teknis, kadang disebut AEO teknis, mencakup bagian infrastruktur dari pekerjaan itu: akses bot, render, kecepatan, data terstruktur, dan kebaruan. Konten dan otoritas dibangun di atasnya.
MEREKA MENCOBA SORANK SEBELUM ANDA
