Ошибка 404

Код 404: что отвечает сервер, когда адреса нет

Ошибка 404 — код ответа сервера «Not Found»: сервер работает, но по запрошенному адресу ничего не найдено. Браузер обычно показывает это как «Страница не найдена». Для сравнения: 200 означает «всё нашлось», 301 — «страница переехала», 500 — «сломался сам сервер», а четвёрка в начале кода — ошибка в запросе, чаще всего в адресе.

Для поиска это нормальная часть протокола. Код 404 сообщает роботу, что страницы нет и показывать её не нужно. Проблемы начинаются в двух случаях: когда 404 получают адреса, которые должны жить, и когда вместо честного 404 сервер отвечает кодом 200.

Откуда берутся битые адреса и что делать с каждым

Страницы обычно не ломаются сами: их удаляют или переименовывают, а про ссылки на них забывают.

Яндекс в справке Вебмастера разделяет случаи так: для перемещённых страниц нужен редирект 301, для окончательно удалённых — код 410 «Gone», а если страницы никогда не было, ошибку можно игнорировать: возможно, кто-то поставил некорректную ссылку. Google обрабатывает 404 и 410 одинаково, так что выбор между ними — вопрос порядка, а не позиций.

Мягкая 404: сервер сообщает об успехе, а страницы нет

Мягкая 404 (soft 404) — страница, которая выглядит как «ничего не найдено», но отвечает кодом 200. Человек не видит разницы, а робот видит противоречие: код говорит, что страница существует, а текст — что её нет. Google описывает это так: если содержимое похоже на ошибку (пустая страница или сообщение об ошибке), Search Console покажет soft 404. Рекомендация там же: для действительно отсутствующих страниц возвращать код 404, а настоящим страницам добавить содержимое.

Откуда берутся мягкие 404: шаблон страницы ошибки настроен с кодом 200; пустая категория или выдача внутреннего поиска без результатов; карточка товара без описания и цены; массовый редирект всех удалённых адресов на главную.

Что 404 делает с SEO: индекс, трафик и ссылки

Сам по себе 404 штрафом не является. По документации Google, адреса с ответами 4xx не используются в поиске, а уже проиндексированные постепенно исключаются из индекса. Эти ответы (кроме 429) не влияют на скорость обхода, а частота повторных заходов на такой адрес снижается. В отчёте Search Console прямо сказано: 404 не обязательно проблема, если страница удалена без замены. Яндекс исключает страницу после повторного обхода, но фиксированных сроков не называет.

Настоящий ущерб бывает другим:

• удалённая страница приводила посетителей или имела внешние ссылки — вместе с ней пропадают и трафик, и вес этих ссылок;
• внутренние ссылки ведут в тупик: человеку негде продолжить, а роботу незачем идти дальше;
• нужная страница по ошибке отдаёт 404 и выпадает из индексации;
• на крупном сайте мягкие 404 продолжают обходиться и тратят краулинговый бюджет (настоящий 404 Google считает сильным сигналом не заходить на адрес снова), а устаревшие адреса в карте сайта стоит убирать.

Допустим, магазин убрал 300 товаров. По статистике посещений выяснилось, что 40 из них приводили покупателей из поиска. Для этих 40 настраивают 301 на ближайшие категории или аналоги, остальные 260 спокойно отдают 404.

Как найти битые ссылки: Вебмастер, Search Console и краулер

1. Яндекс Вебмастер. В списке исключённых страниц есть адреса, которые роботу были известны раньше, а теперь отдают ошибку. Конкретный адрес проверяют инструментом проверки ответа сервера. Подробнее о сервисе — в разделе про Яндекс.Вебмастер.
2. Google Search Console. В отчёте об индексировании страниц выберите причину «Не найдено (404)» и посмотрите примеры адресов.
3. Краулер. Программа обходит сайт как робот и выгружает все ссылки с кодами ответов. Фильтр по 404 показывает не только мёртвый адрес, но и страницу, на которой стоит ссылка, — а исправлять надо именно там.
4. Логи сервера. Строки с кодом 404 показывают, какие несуществующие адреса запрашивают чаще всего и откуда на них приходят.

Исправлять начинают с адресов, на которые есть внешние ссылки или трафик, потом идут внутренние ссылки с самых посещаемых страниц.

Страница 404 для посетителя: что на ней должно быть

Главное требование: страница ошибки должна отдавать код 404, а не 200. Проверить можно в Вебмастере или командой curl -I с адресом заведомо несуществующей страницы. Дальше идёт то, что видит человек: понятное сообщение, поиск по сайту, меню или ссылки на главные разделы и контакты. Автоматический редирект на главную не нужен: он скрывает от посетителя, что адрес не найден.

Страницу ошибки оформляют один раз в шаблоне, а мониторинг мёртвых ссылок — работа постоянная: каждое удаление и перенос могут оставить битые адреса. Такие задачи обычно входят в поддержку сайта, а массовые 404 после смены структуры разбирают в рамках SEO-работ.

Частые вопросы