Технический SEO: единственное руководство, которое вам нужно

Каким бы хорошим ни был ваш контент и какими бы авторитетными ни были ваши обратные ссылки, при проблемах с техническим SEO вы не попадёте в топ. Технический SEO это фундамент, на котором держится любая другая работа по продвижению. Он гарантирует, что Google сможет просканировать ваши страницы, правильно проиндексировать их, быстро загрузить и понять их структуру. Без прочной технической основы вы строите замок на песке.

Технический SEO охватывает четыре основные области: сканируемость (может ли Google получить доступ к вашим страницам?), индексируемость (добавит ли Google их в свой индекс?), Core Web Vitals (быстро ли загружаются ваши страницы и быстро ли они реагируют?) и структурированные данные (понимает ли Google ваш контент?). В этом руководстве каждая область разобрана подробно, а также приведены шаги для устранения самых частых проблем.

Сканируемость: сделайте сайт доступным для Google

Сканируемость это способность Google получать доступ к страницам и ресурсам вашего сайта и считывать их. Если страница недоступна для сканирования, Google не может её проиндексировать. Типичные проблемы со сканируемостью: страницы, закрытые в robots.txt, сломанные редиректы, страницы, требующие авторизации, страницы, отдаваемые по HTTP (а не HTTPS), и ресурсы (CSS, JavaScript), закрытые от Googlebot.

Отчёт о сканировании в Google Search Console показывает, на каких страницах возникают ошибки сканирования. Проверяйте этот отчёт раз в месяц. Типичные ошибки: «404 Not Found» (битые ссылки на несуществующие страницы), «Server Error» (ошибки 5XX) и «Timeout» (страницы, которые загружаются слишком долго).

Проверьте файл robots.txt. Он сообщает Google, какие части сайта сканировать, а какие пропускать. Неверно настроенный robots.txt может закрыть важные страницы. Документация Google по robots.txt описывает правильный синтаксис. Типичные ошибки: закрытие целых каталогов или файлов CSS/JavaScript, из-за чего Google не может корректно отобразить страницы.

Проверьте сканируемость с помощью PageSpeed Insights или Lighthouse. Эти инструменты показывают, корректно ли загружаются ваши ресурсы и может ли страница быть отрисована. Ресурсы, которые не загружаются, мешают Google понять структуру вашей страницы.

Индексируемость: как добавить страницы в индекс Google

Индексируемость это то, добавляет ли Google вашу страницу в свой поисковый индекс на самом деле. Страница может быть сканируемой (Google может получить к ней доступ), но неиндексируемой (Google не включит её в результаты поиска). Типичные проблемы с индексируемостью: страницы, закрытые метатегом robots noindex, страницы с заголовком X-Robots-Tag noindex, дублированный контент без канонических тегов и страницы, не соответствующие стандартам качества.

Проведите аудит метатегов robots. Страница с `` будет просканирована, но не проиндексирована. Этот тег полезен для тестовых сред и закрытого контента, но если применить его к публичным страницам, он заблокирует индексацию. Проверьте самые важные страницы: у них должны быть правильные теги robots (или не должно быть тега robots вовсе, тогда по умолчанию действует index).

Используйте канонические теги для дублированного контента. Если у вас несколько страниц с похожим или одинаковым содержанием, укажите, какая версия каноническая, с помощью канонического тега. Канонические теги сообщают Google, какую страницу индексировать, а какие считать дубликатами. Без правильной канонизации Google индексирует несколько версий, и вес ваших ссылок рассеивается.

Отчёт о покрытии в Google Search Console показывает, какие страницы проиндексированы, а какие заблокированы. Страницы со статусом «Исключено» не индексируются. Типичные причины исключения: «Дубликат без канонической версии, выбранной пользователем», «Заблокировано в файле robots.txt» или «Обнаружена, но пока не проиндексирована». По каждому исключению Search Console объясняет причину и предлагает способы исправления.

Структура сайта и внутренняя перелинковка

Чёткая структура сайта помогает Google понять иерархию вашего контента. Используйте понятные слаги URL и распределяйте страницы по логичным категориям. Избегайте глубоко вложенных структур URL. Страницу `/products/category/subcategory/sub-subcategory/product` Google сканировать сложнее, чем страницу `/products/product`.

Архитектура внутренних ссылок имеет значение. Страницы, на которые ведут ссылки с главной и из основного меню, сканируются чаще и получают больше веса. Постройте логичную иерархию ссылок, при которой важные страницы находятся в 1-2 кликах от главной. Используйте описательные анкоры (а не «нажмите здесь»), чтобы Google понимал, на что указывают ваши ссылки.

Создайте XML-карту сайта со списком важных страниц. Карты сайта помогают Google находить страницы, которые могут остаться незамеченными при переходе по внутренним ссылкам. Отправьте карту сайта в Google Search Console. Карты сайта особенно полезны для сайтов с тысячами страниц или с динамическим контентом, который часто меняется.

Core Web Vitals и качество взаимодействия со страницей

Core Web Vitals это три метрики, которые измеряют пользовательский опыт на вашем сайте: Largest Contentful Paint (LCP), Cumulative Layout Shift (CLS) и Interaction to Next Paint (INP). Core Web Vitals официально подтверждены как факторы ранжирования Google. Плохие показатели ухудшают позиции, хорошие, помогают.

Largest Contentful Paint (LCP) измеряет, сколько времени нужно, чтобы загрузился основной контент страницы. Google рекомендует, чтобы LCP не превышал 2,5 секунды. Медленный LCP часто вызван медленным ответом сервера, блокирующим отрисовку CSS, неоптимизированными изображениями или тяжёлыми файлами JavaScript. Оптимизируйте LCP: ускорьте сервер, отложите загрузку некритичного JavaScript и сожмите изображения.

Cumulative Layout Shift (CLS) измеряет неожиданные сдвиги макета во время загрузки страницы. Высокий показатель CLS означает, что страница «прыгает» при загрузке, что раздражает пользователей. Типичные причины CLS: изображения без заданных размеров, реклама, которая загружается асинхронно, и шрифты, которые резко подменяются. Исправьте CLS: укажите размеры изображений в HTML, зарезервируйте место под рекламу и используйте font-display: swap в правилах @font-face.

Interaction to Next Paint (INP) измеряет скорость реакции на действия пользователя (клики, касания, ввод с клавиатуры). Google рекомендует, чтобы INP не превышал 200 миллисекунд. Медленный INP говорит о JavaScript, который выполняется слишком долго. Оптимизируйте INP: разбивайте длинные задачи JavaScript, снижайте влияние сторонних скриптов и применяйте современные методы отрисовки.

Проверьте свои Core Web Vitals в инструменте Google PageSpeed Insights. Он показывает данные реальных пользователей (если они есть) и лабораторные замеры, а также конкретные рекомендации по улучшению.

Скорость страниц и оптимизация производительности

Скорость страниц напрямую влияет на Core Web Vitals и пользовательский опыт. Быстрые страницы лучше ранжируются, лучше загружаются и лучше конвертируют. Медленные страницы раздражают пользователей и вредят вашему бизнесу. Как ускорить страницы:

Уменьшите размер файлов изображений с помощью сжатия и современных форматов (WebP). Неоптимизированные изображения часто составляют 50-80% веса страницы. По возможности используйте CDN для изображений. Подключите отложенную загрузку для изображений ниже первого экрана, чтобы они не тормозили загрузку страницы. Откладывайте загрузку некритичных ресурсов (видео, изображений ниже первого экрана) до момента, когда пользователь прокрутит страницу близко к ним.

Минимизируйте и откладывайте JavaScript. JavaScript, блокирующий отрисовку, задерживает вывод страницы. Откладывайте некритичный JavaScript или загружайте его асинхронно. Используйте разделение кода, чтобы загружать только тот код, который нужен для конкретной страницы. Удалите неиспользуемые библиотеки и зависимости JavaScript.

Оптимизируйте CSS. Большие файлы CSS блокируют отрисовку. Встройте в страницу критический CSS, необходимый для контента на первом экране. Некритичный CSS загружайте асинхронно. Удалите неиспользуемые правила CSS.

Включите сжатие GZIP. Сжатие HTML, CSS и JavaScript уменьшает размер файлов на 60-80%. Учебный курс web.dev по производительности содержит подробные рекомендации по оптимизации.

Используйте сеть доставки контента (CDN). CDN отдаёт контент с серверов, расположенных рядом с вашими пользователями, что снижает задержки. CDN также кэширует статический контент и ускоряет загрузку по всему миру.

HTTPS и сигналы безопасности

HTTPS это фактор ранжирования. Google отдаёт приоритет сайтам с SSL-сертификатами перед незащищёнными сайтами на HTTP. Каждая страница должна отдаваться по HTTPS. Получите бесплатный SSL-сертификат у Let's Encrypt или у вашего хостинг-провайдера. Перенаправьте все страницы с HTTP на HTTPS с помощью редиректов 301.

После включения HTTPS обновите адрес вашего сайта в Google Search Console, указав версию с HTTPS. Так Google будет сканировать и индексировать защищённую версию сайта. Следите за смешанным контентом (страницы, которые загружают ресурсы и по HTTPS, и по HTTP): браузеры могут предупреждать о нём пользователей.

Индексация в первую очередь для мобильных устройств

Теперь Google индексирует мобильную версию вашего сайта как основную. Если ваш мобильный сайт медленный, плохо оформлен или на нём не хватает контента, ваши позиции страдают. Убедитесь, что мобильный сайт адаптивный, быстро загружается и содержит весь контент десктопной версии.

Проверьте индексацию в первую очередь для мобильных устройств с помощью PageSpeed Insights в мобильном режиме. Убедитесь, что кнопки, формы и навигация нормально работают на сенсорных устройствах. Тестируйте на реальных мобильных устройствах, а не только в эмуляторе браузера.

Структурированные данные и разметка Schema

Структурированные данные Schema.org помогают Google понять ваш контент. Разметка Schema на страницах повышает шанс попасть в избранные сниппеты, расширенные сниппеты и панели знаний. Сама по себе разметка Schema не является фактором ранжирования, но она открывает доступ к расширенным элементам поисковой выдачи, которые повышают CTR.

Определите типы Schema, подходящие для вашего контента (Article, Product, Recipe, Event, Organization, LocalBusiness). Внедрите разметку JSON-LD для каждого типа контента. Проверьте разметку в инструменте Google Rich Results Test. Исправьте все ошибки валидации до публикации.

Постоянный мониторинг технического SEO

Выстройте регулярный мониторинг технического SEO. Раз в неделю проверяйте Google Search Console на новые ошибки сканирования и проблемы с индексацией. Раз в месяц отслеживайте Core Web Vitals. Раз в квартал запускайте тесты PageSpeed Insights на ключевых страницах. Следите за краулинговым бюджетом и статистикой сканирования, чтобы убедиться, что Google эффективно сканирует ваш сайт.

Настройте оповещения о падении позиций. Внезапное снижение позиций иногда сигнализирует о технических проблемах, таких как сбои индексации или ошибки сканирования. Разбирайтесь сразу, чтобы не допустить долгой потери трафика.

Технический SEO для ИИ-краулеров: что проверить

У технического SEO теперь есть вторая аудитория: краулеры ИИ-компаний, такие как GPTBot и OAI-SearchBot у OpenAI, ClaudeBot у Anthropic и PerplexityBot. Они соблюдают ваш robots.txt так же, как Googlebot, но большинство из них не выполняет JavaScript, поэтому контент, который подгружается только на стороне клиента, остаётся для них невидимым.

• Доступ: убедитесь, что robots.txt, а также ваш файрвол или CDN не блокируют ИИ-краулеры, у которых вы хотите получать цитирования. Проверьте это бесплатным инструментом проверки robots.txt.
• HTML, формируемый на сервере: основной текст, заголовки и цены должны быть в исходном HTML.
• Чистая структура: один H1, логичные H2 и H3 и короткие самодостаточные абзацы, которые легко цитировать.
• Скорость и стабильность: ИИ-краулеры, как и поисковые системы, прекращают ожидание на медленных страницах.

Что входит в чек-лист технического SEO?

Чек-лист технического SEO это перечень проверок, благодаря которым поисковые системы и ИИ-краулеры могут добраться до каждой важной страницы, прочитать и проиндексировать её. Проходите его после каждого редизайна или миграции и как минимум раз в квартал:

1. Каждый важный URL отдаёт статус 200 без цепочек редиректов; удалённые страницы отдают 404 или редирект 301 на ближайшую замену.
2. XML-карта сайта содержит только индексируемые канонические URL и отправлена в Google Search Console.
3. У каждой страницы есть самоссылающийся канонический тег, и ни на одной важной странице нет noindex.
4. В отчёте об индексации страниц в Search Console нет растущей группы исключённых страниц.
5. Core Web Vitals (LCP, INP, CLS) проходят проверку для мобильных устройств в отчёте Search Console.
6. HTTPS используется везде, без смешанного контента.
7. Структурированные данные проходят валидацию в Google Rich Results Test.
8. На многоязычных сайтах указаны полные теги hreflang, включая x-default.

Проверьте отдельную страницу с помощью бесплатного расширения Sorank для Chrome, которое одним кликом проверяет технические, on-page и GEO-сигналы, или протестируйте весь сайт с помощью аудита сканируемости для ИИ. XML-карту сайта проверит инструмент проверки карты сайта.

Заключение

Технический SEO это невидимая инфраструктура, на которой держится любая другая работа по продвижению. Без правильной сканируемости, индексируемости, производительности и структуры ваш контент и ссылки не смогут принести результат. Освойте основы: проверяйте сканируемость, следите за корректной индексацией, улучшайте Core Web Vitals, оптимизируйте скорость страниц и внедряйте разметку Schema. Эта техническая база обязательна для успеха в современном SEO.

Воспользуйтесь нашим инструментом GEO SEO-аудита, чтобы выявить технические проблемы на всём вашем сайте. Наша платформа сканирует сайт так же, как это делает Google, находит ошибки сканирования, проблемы с индексацией и недочёты Core Web Vitals и расставляет приоритеты исправлений по степени влияния. Начните с бесплатного технического аудита уже сегодня.