Кратко
проверка готовности к SearchGPT определяет, могут ли поиск ChatGPT добраться до вашего сайта, прочитать его и процитировать. Она выполняет восемь взвешенных проверок: во главе доступ для OAI-SearchBot и ChatGPT-User и отсутствие noindex, затем структура, структурированные данные, источники, актуальность и прямые ответы, и выдаёт оценку из 100 с классом. Сначала исправьте доступ: OpenAI сообщает, что сайты, блокирующие OAI-SearchBot, не показываются в ответах поиска ChatGPT.
Хотите узнать больше? Спросите
Проверка готовности к SearchGPT сообщает, могут ли ваши страницы стать источниками в ответах ChatGPT. OpenAI тестировала SearchGPT как прототип в июле 2024 года (OpenAI, SearchGPT prototype), а затем запустила его внутри ChatGPT 31 октября 2024 года под названием ChatGPT search, со «ссылками на релевантные веб-источники» в каждом ответе (OpenAI, introducing ChatGPT search). Эти ссылки и есть новый приз: проверка показывает, что стоит между вашим сайтом и ними.
Что проверяет инструмент готовности к SearchGPT?
Введите домен или URL. Инструмент загружает страницу и robots.txt домена, а затем оценивает восемь сигналов. Доступ весит больше всего, потому что остальное не имеет значения, если OpenAI не может прочитать страницу.
| Проверка | Пройдена | Иначе | Вес |
|---|---|---|---|
| OAI-SearchBot разрешён | Не заблокирован в robots.txt | Провал | 2 |
| ChatGPT-User разрешён | Не заблокирован в robots.txt | Провал | 1,5 |
| Индексируется | Нет noindex в мета-теге robots | Провал | 1,5 |
| Структурированный контент | Не менее двух H2 и один список или таблица | Частично | 1 |
| Структурированные данные | Хотя бы один блок JSON-LD | Провал | 1 |
| Исходящие цитаты | Две или больше ссылок на другие сайты | Частично при одной, провал при отсутствии | 0,5 |
| Актуальность | В коде есть дата публикации или обновления | Частично | 1 |
| Прямые ответы | Разметка FAQ или заголовки в форме вопросов | Частично | 1 |
Отчёт перечисляет каждую проверку с её статусом и исправлением для каждой непройденной.
Как рассчитывается оценка готовности?
Пройденная проверка приносит полный вес, частичная половину, проваленная ничего. Оценка = набранные баллы ÷ 9,5 × 100, поскольку веса в сумме дают 9,5. Классы следуют привычной шкале: A от 90, B от 75, C от 60, D от 40, F ниже.
Пример: страница, открытая для обоих агентов OpenAI, индексируемая, хорошо структурированная с заголовками-вопросами, но без JSON-LD, с одной исходящей ссылкой и без даты, набирает 7,75 балла. Её оценка: 82, класс B. Добавление JSON-LD и даты подняло бы её до 97.
Одни только три проверки доступа весят 5 баллов из 9,5. Сайт, который блокирует OAI-SearchBot и ставит noindex, не может набрать больше 63, каким бы ни было качество его контента.
Какой робот OpenAI что делает?
OpenAI использует отдельных агентов, и каждая настройка robots.txt не зависит от остальных (OpenAI, overview of crawlers).
| Пользовательский агент | Роль | Что даёт блокировка |
|---|---|---|
| OAI-SearchBot | Показывает сайты в поисковых функциях ChatGPT | Ваши страницы не показываются в ответах поиска ChatGPT, хотя могут по-прежнему появляться как навигационные ссылки |
| ChatGPT-User | Заходит на страницу, когда этого требует запрос пользователя | OpenAI сообщает, что правила robots.txt могут не применяться к таким визитам по инициативе пользователя, и этот агент не используется для решения о включении в поиск |
| GPTBot | Собирает контент, который может использоваться для обучения моделей OpenAI | Ваш контент не используется для обучения; на поиск это не влияет |
Так что вы можете отказаться от обучения и всё равно оставаться в цитатах: разрешите OAI-SearchBot, запретите GPTBot. OpenAI добавляет, что после обновления robots.txt её поисковым системам может потребоваться около 24 часов, чтобы подстроиться. Проверьте файл с помощью проверки robots.txt и прочитайте нашу статью глоссария о роботах OpenAI.
Как поиск ChatGPT находит страницы, которые цитирует?
Он ищет в интернете по каждому вопросу, отчасти через партнёров. OpenAI поясняет, что поиск ChatGPT иногда работает с другими поисковыми провайдерами и «как правило, переписывает ваш запрос в один или несколько целевых запросов», отправляемых им, а затем может отправлять более конкретные уточняющие запросы (OpenAI Help Center, searching the web with ChatGPT).
Для ваших страниц отсюда два следствия. Во-первых, индексация и хорошие позиции в классических поисковых системах по-прежнему важны, потому что их результаты питают ответ. Во-вторых, один вопрос превращается в несколько подзапросов, поэтому страница, отвечающая на точный подвопрос, имеет больше шансов, чем расплывчатая страница по широкой теме. Инструмент Sorank «Разветвление запросов в ИИ» показывает подзапросы, которые ChatGPT, Claude и Gemini выполняют перед ответом на вопросы вашего рынка.
Как исправить низкую оценку готовности?
Двигайтесь от самых весомых проверок к самым лёгким.
- Разблокируйте OAI-SearchBot. Поищите «Disallow: /» в его группе или в группе «*», если собственной группы нет. По стандарту исключений для роботов робот следует группе, в которой он назван, и переходит к «*» только тогда, когда ни одна группа ему не подходит (IETF, RFC 9309).
- Уберите noindex со страниц, которые хотите видеть в цитатах. Правило noindex велит поисковым системам не показывать страницу в результатах (Google Search Central, robots meta tag). Проверка читает мета-тег; заголовок HTTP X-Robots-Tag проверьте отдельно с помощью проверки HTTP-заголовков.
- Структурируйте контент: чёткие H2, прямой ответ в начале каждого раздела, списки и таблицы.
- Добавьте JSON-LD: Organization, Article, FAQPage там, где это уместно. Генератор schema создаёт его.
- Указывайте источники со ссылками на исследования, организации или официальную документацию.
- Показывайте даты: datePublished и dateModified, честные.
Как убедиться, что роботы OpenAI заходят на ваш сайт?
Поищите их в журналах вашего сервера или CDN. OpenAI публикует пользовательского агента каждого робота и диапазоны IP-адресов, которые они используют: OAI-SearchBot представляется строкой, содержащей «OAI-SearchBot», и ссылкой на openai.com/searchbot, а его адреса перечислены в общедоступном файле JSON. Когда он загружает robots.txt, он может добавить к пользовательскому агенту отметку «robots.txt», чтобы вы могли отличить такие запросы.
- Визиты OAI-SearchBot показывают, что ваши страницы рассматриваются для поиска ChatGPT.
- Визиты ChatGPT-User показывают, что вопрос пользователя привёл ChatGPT к открытию одной из ваших страниц.
- Полное отсутствие визитов спустя несколько недель при разрешённом доступе обычно указывает на правило межсетевого экрана или на страницы, которые трудно обнаружить.
Проверьте, что IP-адреса совпадают с опубликованными диапазонами: пользовательского агента может скопировать кто угодно.
О чём оценка не говорит?
Готовность это предпосылка, а не гарантия цитирования. Помните об этих ограничениях.
- Цитирование определяет релевантность. Идеальную оценку у страницы, которая не отвечает на вопрос, цитировать не будут.
- Чтение robots.txt упрощено. Бот считается заблокированным, только когда его группа запрещает весь сайт; частичные ограничения проходят.
- Одна страница за раз, в HTML, отдаваемом до выполнения JavaScript.
- Правила сервера и межсетевого экрана не проверяются. Если ваш CDN блокирует неизвестных ботов, возможно, придётся разрешить опубликованные диапазоны IP-адресов OpenAI.
- Три бесплатные проверки в день после быстрой проверки на робота.
Проверка готовности к SearchGPT или GEO-аудит?
Используйте оба: они смотрят на одну и ту же страницу с двух сторон.
| Проверка готовности к SearchGPT | GEO-аудит | |
|---|---|---|
| Фокус | Только поиск ChatGPT | Все ответные системы |
| Роботы | OAI-SearchBot и ChatGPT-User | 14 ИИ-агентов |
| Специфические проверки | noindex, исходящие цитаты | llms.txt, глубина контента, фактическая плотность |
| Число проверок | 8 | 10 |
Запустите GEO-аудит для общей картины, а проверку видимости в ChatGPT для выяснения, упоминает ли вас ChatGPT уже сейчас. Если нет, на нашей странице почему ChatGPT не рекомендует ваш сайт перечислены обычные причины.
Как понять, что ChatGPT начал вас цитировать?
Отслеживайте запрос за запросом. Отслеживание упоминаний в ИИ от Sorank каждую неделю записывает, называют ли ChatGPT, Claude, Gemini и другие ИИ-ассистенты ваш бренд на вопросы ваших покупателей и какие источники они цитируют, а дашборд GEO и SEO ставит эти упоминания рядом с вашим трафиком из Google. Для общего представления прочитайте нашу статью глоссария о поиске ChatGPT.
Разрешите OAI-SearchBot, оставайтесь индексируемыми, отвечайте чётко: именно это делает страницу пригодной для цитирования в ChatGPT. Проверьте свой сайт прямо сейчас, а затем изучите тарифы Sorank, чтобы отслеживать свою видимость в ИИ на autopilot.
