Веб-мастер Google находит URL-адрес с перенаправлениями
Я ломал голову над этим в течение нескольких месяцев, у нас около 100 Не найденных ссылок с 404 кодами ответов.
Код ответа правильный, так как эти страницы больше не существуют, однако то, что сбивает с толку, когда я смотрю, с каких страниц они связаны, они звонят со страницы, которой не существует, и на них есть перенаправления или с карты сайта.
Например, если на странице "/red-boots" был код ответа 404. Я проверяю, где это есть ссылка, и там написано "/ботинки/обувь" и карта сайта.
Когда я проверяю URL "/ботинки/обувь", у него есть перенаправление на "/обувь", однако Google не видит, что перенаправление - это просто поиск старых ссылок на "/ботинки/обувь".
Я восстановил карту сайта, и это не помогло, я пометил их все как исправленные, и в течение 2 дней они все вернулись. Так что, если бы кто-нибудь мог пролить немного света на то, почему Google просматривает неопубликованные страницы и не следит за перенаправлениями, которые были бы блестящий.
2 answers
Существует два типа перенаправлений:
1) 301: постоянное перенаправление -> Если вы добавили это, Google будет знать, что вы навсегда переместили эту страницу, и сохранит это в своем индексе.
2) 302: временное перенаправление -> Это не позволит искателю индексировать перенаправление постоянно.
Сначала убедитесь, что перенаправление является 301 постоянным перенаправлением . Кроме того, Google требуется некоторое время (может быть неделя или даже месяц), чтобы отразить эти изменения перенаправления. Эти устаревшие ссылки/старое поведение на страницах будут продолжать существовать некоторое время, а затем в конечном итоге покинут индекс.
Также, если некоторые из ваших страниц навсегда закрыты, то лучше бросить HTTP-код 410, чтобы искатель знал, что вы удалили эту страницу с сайта, и, следовательно, искатель также должен удалить ее из индекса. В случае 404 он продолжает попадать на эту страницу, поскольку видит ее как временную проблему на сайте.
Проверьте источники, из которых старые страницы все еще связаны. Возможно, вы обновили карту сайта, но на некоторых старых страницах, которые вы не удалили, по-прежнему есть старые ссылки, и, следовательно, поисковый робот достигает их. Если вы используете инструмент веб-мастера, он покажет вам все подробности на вкладке "Связано с" в разделе "Ошибки".
Я видел это на нескольких сайтах, которые существуют уже некоторое время. Ссылки и URL-адреса меняются со временем, но Google не склонен их забывать. Иногда URL-адрес "Ссылка с" отсутствует уже много лет, но Google по-прежнему время от времени помечает их, возможно, просто для того, чтобы убедиться, что вы ничего не пропустите.
Как упоминает @abhinsit, вы можете использовать заголовок 410 для всего, что абсолютно исчезло навсегда. Google может все еще возвращаться, чтобы проверить в будущем, но, как правило, эти вероятно, их безопасно игнорировать.