Быть в курсе
Аватарка автора Катерина Быкова
Облако

Как веб-разработчику улучшить SEO сайта с помощью кода

8 октября 2026

18 минут

Телеграм

ВКонтакте

Подготовили гайд для веб-разработчиков: разберем, что в поисковой выдаче зависит от кода, как сделать контент на JavaScript видимым для робота и какие проверки встроить в релиз, чтобы не возвращаться к правкам после запуска.

Что в поиске зависит от кода

У продвижения сайта несколько составляющих: контент, ссылки и техническая часть. В техническом SEO многое зависит от кода и настроек сервера. Техническая оптимизация сайта помогает поисковому роботу обойти страницы, получить их содержимое и правильно понять, что на них находится.

Что здесь в зоне ответственности разработчика:

  • структура HTML и семантика верстки, 
  • метатеги и заголовки, которые формирует шаблон,
  • доступность контента для поискового робота, 
  • коды ответа, редиректы, robots.txt, sitemap.xml, canonical, 
  • скорость отдачи и отрисовки страницы, 
  • адаптивность и поведение интерфейса на мобильных устройствах, 
  • микроразметка и корректные атрибуты изображений.

Поиск должен получить страницу целиком и правильно ее разобрать. В этом и состоит SEO для разработчика — влиять на позиции напрямую из кода не получится.

Путь страницы от робота до выдачи

Чтобы понять, где ломается индексация, посмотрим на маршрут страницы.

Обход. Поисковый робот — Googlebot у Google, YandexBot у Яндекса — находит URL по ссылкам, из sitemap.xml или при повторном обходе сайта. Он запрашивает страницу и получает код ответа и HTML.

Рендеринг. Если содержимое страницы зависит от JavaScript, поисковая система выполняет скрипты и получает отрендеренную версию страницы. Обход и рендеринг могут происходить не одновременно, поэтому важно, чтобы скрипты, стили и другие ресурсы, необходимые для отображения контента, были доступны роботу. Google, например, использует для рендеринга Chromium.

Индексирование. Поисковая система анализирует полученную страницу: текст, ссылки, метатеги и разметку — и решает, добавлять ли ее в индекс.

Ранжирование. Из проиндексированных страниц поисковая система формирует результаты для конкретного запроса.

Обход и индексирование — разные процессы. Страницу могут обойти, но не добавить в индекс. И наоборот, URL, закрытый от обхода через robots.txt, в некоторых случаях может появиться в результатах поиска, например если на него ведут другие ссылки.

Разметка, которую поиск читает первой

Семантика верстки сообщает поиску, из чего состоит страница: где заголовок, где навигация, где основной текст. Внешний вид тут ни при чем: <div class="title"> и <h1> могут выглядеть на экране одинаково, но для робота это разные сущности.

Минимум, который стоит держать в каждом шаблоне:

  • один <h1> на страницу, дальше уровни <h2> и <h3> по вложенности, без пропусков ради размера шрифта; 
  • <nav>, <main>, <article>, <aside>, <footer> вместо сплошных <div>; 
  • навигация обычными ссылками <a href="...">. Переход, который делает onclick или роутер без href, робот не считает ссылкой и по нему не пойдет; 
  • списки, таблицы и цитаты — соответствующими тегами, а не версткой из блоков.

Метатеги формирует шаблон, и у каждой страницы они должны быть свои: уникальный <title>, осмысленный description, корректный <meta charset> и viewport для мобильной версии. Одинаковые title и description сами по себе не делают страницы дублями. Но метатеги должны точно описывать содержимое конкретной страницы: <title> помогает поисковой системе понять ее тему, а description может использоваться при формировании сниппета. 

Совет эксперта

Чаще всего проблема не в одной, а в цепочке настроек: страница открывается по нескольким URL, canonical задан неверно, а часть контента подгружается только после действий пользователя. Техническое SEO сайта стоит проверять не по общему чек-листу, а на реальных шаблонах страниц.

Почему контент на JavaScript может не попасть в индекс

Здесь важно различать две версии одной страницы. Исходный HTML — это то, что сервер отдал в ответ на запрос. Отрендеренная страница — результат после выполнения JavaScript. Google отправляет на рендеринг страницы, которые возвращают код 200, и может индексировать контент, появившийся после выполнения JavaScript.

Яндекс тоже умеет выполнять JavaScript. В Яндекс Вебмастере управление рендерингом JavaScript пока находится в статусе беты. По умолчанию робот сам решает, выполнять ли JavaScript на странице. Если на сайте уже настроен SSR или пререндеринг, Яндекс рекомендует отключить дополнительный рендеринг.

При этом корректное отображение страницы в обычном браузере не гарантирует, что поисковый робот получит тот же результат. Ошибка JavaScript или прерванный рендеринг могут повлиять на контент и метаданные, которые увидит Яндекс. Поэтому результат стоит отдельно проверять в Яндекс Вебмастере.

Поэтому пустой view-source: сам по себе не означает, что поиск не увидит содержимое страницы. Важно проверить, какой контент в итоге доступен роботу после рендеринга.

Проблемы могут возникнуть, если:

  • текст или ссылки загружаются только после действия пользователя, например клика или прокрутки;
  • ресурсы, необходимые для загрузки контента, недоступны поисковому роботу;
  • ошибка в JavaScript мешает загрузить часть содержимого страницы;
  • title, description или другие важные данные формируются на клиенте, но после рендеринга робот получает их не в том виде, в котором ожидалось;
  • навигация построена только на обработчиках событий вместо ссылок <a href>, поэтому робот не может обнаружить следующие страницы.

У каждой схемы рендеринга свои особенности для SEO:

Схема Что робот получает из исходного HTML С чем придется считаться
CSR, отрисовка на клиенте Часть контента может появляться только после выполнения JavaScript Нужно проверять, какой контент, ссылки и метаданные доступны роботу после рендеринга
SSR, отрисовка на сервере Готовый HTML с контентом Нагрузка на сервер и кеширование: при неверных настройках робот получит устаревшую версию страницы
Пререндеринг Заранее собранный HTML из кеша Контент устаревает между пересборками, динамические блоки в снимок не попадают
Гибридная схема Готовый HTML для важных блоков, остальное на клиенте Нужно следить, что текст, ссылки и метатеги попали именно в серверную часть

Проверяют обе версии по очереди. Исходный HTML смотрят через view-source: или запрашивают командой curl -s https://example.com/catalog/ | grep "<h1".

Если заголовка и текста там нет, то смотрят отрендеренную версию. Google показывает ее в «Проверке URL» в Google Search Console и в Rich Results Test, а в Яндекс Вебмастере можно сравнить содержимое страницы с выполнением JavaScript и без него. И если контента нет и в рендеренном HTML, значит поиск его действительно не получает.

При SSR HTML формируется на стороне сервера, поэтому скорость ответа зависит в том числе от ресурсов инфраструктуры и настроек кеширования. Если проекту нужно больше вычислительных ресурсов, их можно масштабировать на облачных серверах Рег.облака без переноса данных.

Что сервер сообщает роботу

Настройки ниже помогают поисковому роботу понять, доступна ли страница, где ее искать и какой адрес считать основным. Ошибки в них не всегда видны в браузере: страница может открываться нормально, а поиск при этом получает неверные сигналы.

Коды ответа сообщают поисковому роботу, что произошло при запросе страницы. Код 200 означает, что сервер успешно обработал запрос, но сам по себе индексацию не гарантирует. Если страницы больше нет, сервер должен вернуть 404, а если она переехала на другой адрес — перенаправить запрос.

Для постоянного переноса используют 301, для временного — 302. Если сервер временно недоступен, можно вернуть 503. Этот код показывает, что проблема временная, а в заголовке Retry-After можно указать, когда повторить запрос.

Редирект. При переносе страницы проверьте, что выбран подходящий тип перенаправления, а сами редиректы не образуют длинных цепочек и циклов.

robots.txt. Файл управляет именно обходом, а не индексированием. Страница, закрытая директивой Disallow, может попасть в выдачу, если на нее ссылаются другие сайты. К тому же робот не увидит на закрытой странице тег noindex, и запрет не сработает. Чтобы убрать страницу из поиска, оставьте ее открытой для обхода и поставьте:

sitemap.xml. Карта подсказывает роботу, какие страницы на сайте есть. Она особенно полезна на крупных сайтах, для страниц без внутренних ссылок и при глубокой структуре сайта. В нее включают канонические URL, отдающие 200, а поле lastmod заполняют реальной датой изменения.

Canonical. Тег указывает, какой адрес считать основным, если страница доступна по нескольким URL. Поиск может выбрать и другой, если сигналы противоречат друг другу. Указывайте абсолютный URL и помечайте canonical саму каноническую страницу:

Боты-сканеры и автоматические атаки могут создавать лишнюю нагрузку и искажать коды ответов. Облачный WAF (WAFaaS) от Рег.облака фильтрует подозрительные запросы до того, как они дойдут до приложения, и помогает сохранять чистоту логов.

А если сайт работает с персональными данными, безопасное облако 152-ФЗ обеспечивает соответствие требованиям регуляторов.

Скорость и мобильные пользователи

Google оценивает страницы по 3 метрикам Core Web Vitals, и у каждой есть порог. Для оценки берут 75-й процентиль загрузок страницы:

  • LCP, отрисовка основного содержимого (до 2,5 секунды); 
  • INP, отклик интерфейса на действие (менее 200 миллисекунд); 
  • CLS, смещение элементов при загрузке (менее 0,1).

Проверять скорость можно по лабораторным и полевым данным. Лабораторные тесты, например Lighthouse, запускаются в заданных условиях и помогают найти причины проблем с производительностью. Полевые данные показывают, как сайт работает у реальных пользователей. PageSpeed Insights может показывать оба типа данных, а в Search Console можно отслеживать Core Web Vitals для групп страниц.

Что реально влияет на метрики:

  • сжатие и современные форматы изображений, разные размеры изображений для мобильных и десктопных устройств, атрибуты width и height, чтобы макет не смещался при загрузке;
  • отложенная загрузка некритичных скриптов, preload для шрифтов и ключевых ресурсов; 
  • кеширование на стороне сервера и CDN для статики; 
  • отказ от тяжелых сторонних виджетов на важных страницах.

Google индексирует мобильную версию сайта: по ней он судит о содержимом страницы. Поэтому важно не то, как контент выглядит на телефоне, а есть ли он в коде. Поиск получит текст, убранный в таб или аккордеон, так как он лежит в HTML и скрыт оформлением. А если блок вырезали из мобильного шаблона или он подгружается после клика или свайпа, для поиска его нет, таких действий Google за пользователя не выполняет. Адаптивная верстка снижает этот риск, так будет один URL, один HTML, но разное оформление. 

Скорость отрисовки (LCP) и стабильность макета (CLS) зависят не только от кода, но и от того, насколько быстро сервер отдает HTML и статику. Облачные серверы от Рег.облака с NVMe-накопителями и возможностью гибкого масштабирования помогают удерживать серверный отклик в пределах, необходимых для хороших Core Web Vitals.

А для статики и медиафайлов можно подключить объектное S3-хранилище — оно снижает нагрузку на основной сервер и ускоряет загрузку тяжелых ресурсов.

Изображения, микроразметка и доступность

Изображения. Атрибут alt описывает картинку, это нужно и поиску по изображениям, и скринридерам. Имя файла лучше осмысленное, а не IMG_4821.jpg. К изображению в первом экране не стоит применять ленивую загрузку, потому что оно участвует в LCP.

Микроразметка — это подписи к элементам страницы: здесь товар, здесь его цена, здесь автор статьи. Пользователь их не видит, зато поиск по ним точнее понимает, что за данные перед ним. Корректная разметка может использоваться для расширенного представления в выдаче, но не гарантирует его.

Подписи берут из словаря Schema.org, понятного и Google, и Яндексу. Для разметки можно использовать JSON-LD, который рекомендует Google, или Microdata с атрибутами в HTML-тегах. Данные в разметке должны соответствовать содержимому страницы: например, цена товара — совпадать с ценой на экране. Разметку можно проверить в Rich Results Test, валидаторе Яндекс Вебмастера и Schema.org Validator.

Доступность. ARIA-атрибуты, порядок фокуса и контраст напрямую на ранжирование не влияют. Но SEO для фронтенд-разработчика и доступность во многом требуют одного и того же: понятной структуры и семантической верстки.

SEO-проверки в релизном цикле

Разовый аудит быстро устаревает, поэтому проверки встраивают в процесс.

Локально и в ветке. Линтер верстки ловит незакрытые теги и нарушенную вложенность заголовков. Туда же добавляют проверку шаблона: один <h1> на страницу, title и description заполнены и не повторяются.

На тестовом стенде. Lighthouse или отдельный шаг в CI дает лабораторные замеры на фиксированном окружении: время отрисовки, смещение элементов, объем заблокированного потока. Пороги задают заранее, если результат хуже, сборка не проходит. Полевые Core Web Vitals так не проверить, их считают по реальным взаимодействиям, поэтому за ними следят уже после релиза. Здесь же проверяют, что стенд закрыт от индексирования, и что этот запрет не попадет в продакшен вместе с кодом. 

Перед выкладкой. Сравнивают robots.txt с текущей версией на сайте: релиз не должен закрыть нужные разделы. Карту сайта проверяют, если релиз меняет состав URL — добавляет, удаляет или переносит страницы. Тогда же смотрят, что редиректы ведут на нужные адреса и возвращают ожидаемый код ответа.

Автоматизируют то, что ломается регулярно: коды ответа, дубли метатегов, размер бандла, валидность микроразметки.

Проверки SEO на тестовом стенде требуют окружения, максимально похожего на продакшен. Free Tier от Рег.облака дает бесплатный облачный сервер с полноценным root-доступом: можно развернуть копию сайта, прогнать Lighthouse или проверить рендеринг JavaScript роботом. Минимальная конфигурация — 1 vCPU, 1 ГБ RAM и 10 ГБ NVMe — доступна бесплатно до 3 месяцев, а при росте проекта можно бесшовно перейти на коммерческую инфраструктуру без переноса данных.

Частые ошибки и порядок разбора

Когда страницы пропадают из выдачи или падает трафик, разбор идет от простого к сложному.

  • Проверьте код ответа и доступность URL для робота: curl -I https://example.com/page/; 
  • посмотрите robots.txt и метатег robots на самой странице; 
  • проверьте, какой контент получает робот после рендеринга страницы;
  • проверьте canonical: не указывает ли он на другую страницу; 
  • поищите дубли по разным URL — со слешем и без, http и https, с параметрами.

После релиза отдельно стоит проверить забытый noindex с тестового стенда и корректность редиректов: визуально страница может работать как ожидается, поэтому такие ошибки легко пропустить.

Совет эксперта

Решение не бывает плохим или хорошим вне контекста. Бесконечная прокрутка удобна пользователю, но роботу нужна понятная пагинация или отдельные доступные URL. Как сайт будет обходиться и индексироваться, стоит продумать до внедрения.

Если страницы пропадают из выдачи из-за периодической недоступности сервера, стоит проверить, не атакуют ли сайт. DDoS-защита от DDoS-Guard, интегрированная в Рег.облако, фильтрует трафик на уровнях L3–L7 и запускает очистку за секунды. Это помогает сохранить доступность сайта для роботов и пользователей, даже когда кто-то пытается его «уронить».

Работа в связке с SEO-специалистом

Лишние итерации часто начинаются с неясной постановки задачи. Если разработчику ставят задачу «улучшить SEO раздела», непонятно, что именно нужно изменить и как проверить результат.

Чтобы задачу можно было взять в работу, нужно определить:

  • Какие страницы или шаблоны затрагиваются.
  • Что должно измениться в HTML или в ответе сервера.
  • Чем проверять результат и какое значение считать нормой.

Разработчик, в свою очередь, предупреждает до релиза, если правка ломает кеширование, конфликтует с архитектурой или требует переделки шаблона целиком.

Результат смотрят по шагам. Сначала коды ответа, отсутствие дублей, доступность контента, валидная разметка. Затем обход и индексирование по отчетам Search Console и Яндекс Вебмастера. И только после того, как поиск переобойдет измененные страницы, смотрят на трафик. Сколько времени уйдет на переобход, зависит от сайта и объема правок, где-то хватит нескольких дней, где-то уйдут недели.  

Что проверить перед релизом и после

Перед выкладкой:

  • доступные страницы отдают 200, удаленные 404 или 410; 
  • на каждой странице единственный <h1>, уникальные title и description; 
  • основной контент и ссылки доступны поисковому роботу после рендеринга страницы; 
  • canonical указывает на основную версию страницы и задан абсолютным URL; 
  • robots.txt не закрывает нужные разделы, скрипты и стили; 
  • noindex с тестового стенда снят; 
  • если состав URL менялся, sitemap.xml содержит только канонические адреса, отдающие 200; 
  • микроразметка проходит валидаторы; 
  •  мобильная версия содержит тот же контент, что десктопная.

Сразу после выкладки:

  • в логах сервера нет роста 404 и 5xx; 
  • в отчетах Search Console и Яндекс Вебмастера нет всплеска ошибок обхода; 
  • ключевые шаблоны отдают то, что ожидали: коды ответа, метатеги, canonical.
  • Позже, по мере обхода и индексирования:
  • новые страницы появляются в индексе, а удаленные из него уходят; 
  • полевые Core Web Vitals не ухудшились; 
  • в выдаче не появились дубли. 

Заключение

Технически грамотный сайт не гарантирует топ, но ошибка в коде может помешать всему остальному. Контент не попадет в индекс, если робот его не получит. SEO для веб-разработчика — это вся техническая сторона сайта: доступный поисковому роботу контент, понятная структура, корректные коды ответа и редиректы, рабочая схема рендеринга и показатели Core Web Vitals.

Частые вопросы

Достаточно ли семантической верстки, чтобы улучшить позиции сайта?

Нет. Семантическая верстка помогает поиску разобрать структуру страницы: понять, где заголовок, навигация и основной текст. Но сама по себе она не гарантирует рост позиций.

Кто отвечает за Title, Description и canonical: разработчик или SEO-специалист?

Содержание метатегов обычно определяет SEO-специалист, а шаблон, который их подставляет, и логика canonical — на стороне разработки. Ошибка в шаблоне может затронуть сразу много страниц: например, привести к одинаковым метатегам.

Нужно ли обновлять sitemap.xml после каждого релиза?

Карту обновляют, когда страницы добавились или пропали, и это удобно автоматизировать. Если состав URL не изменился, файл можно не обновлять.

Через сколько времени поиск увидит изменения на странице?

Точного срока нет: он зависит от сайта, страницы и того, как часто ее обходит робот. Можно запросить повторный обход через «Проверку URL» в Search Console или «Переобход страниц» в Яндекс Вебмастере, но это не гарантирует конкретного срока обновления страницы в поиске.

Как избежать дублей на страницах фильтров и пагинации?

Сначала определяют, какие URL должны участвовать в поиске, а какие создают дубли. Для дублирующихся страниц можно указать основной адрес через canonical и настроить обработку URL-параметров. Страницы пагинации оставляют доступными по отдельным URL и связывают обычными ссылками. Если содержимое страниц различается, не стоит указывать для всех canonical на первую страницу.

Новые статьи