5 способов удалить страницу из поиска Яндекса или Google
SEOВсе вебмастера и SEO-специалисты хотят, чтобы страницы их сайта как можно быстрее попадали в индекс поисковых систем, однако бывают ситуации, когда наоборот нужно удалить страницу из поиска. Причины для этого бывают разные:
- неактуальная страница или раздел сайта;
- страница, являющаяся дублем другой;
- попадание личных данных, контактной информации пользователей в результаты поиска;
- попадание технических разделов, результатов поиска сайта, и прочих не нужных для индексации страниц и разделов сайта.
Далее мы рассмотрим 5 способов удаления страниц из поиска Google и Яндекс, все они подразумевают, что вы являетесь владельцем или администратором ресурса.
Страница с ошибкой 404
Первый простой способ, для реализации которого надо удалить ненужную страницу с сайта, а вместо нее должен отображаться настроенный редирект на страницу 404 с сообщением, что данная страница не существует. Этот метод является надежным, но медленным, так как придется ждать посещения робота для новой индексации страниц, а поисковая система Яндекс бывает, не наведывается в гости по нескольку месяцев, на не очень интересные ей ресурсы.
В случае, когда страницу нужно сохранить на сайте, и только выбросить из поискового индекса этот метод не подойдет, для этого есть другие способы.
Закрытие разделов и отдельных страниц через robots.txt
Этот способ применяют, когда по мнению вебмастеров, или SEO-специалистов, нужно сохранить содержимое разделов, или страниц, но закрыть их от индексации. В файле robots.txt объявляется тип поискового робота, для всех типов ставится «*»:
User-Agent: *, а далее прописывается запрещающая директива с адресом страницы или раздела: Disallow: /страница.html.
В этом случае так же придется ждать посещения поискового робота, и страница может не выпасть из индекса, в случае если на нее ведут другие ссылки.
Закрытие индексации тегом Robots
Это альтернативный метод закрытия от индексации с помощью файла robots.txt, только закрытии страниц происходит добавлением кода в сам HTML: <meta name="robots" content="noindex,nofollow" />. Удобство этого метода в том, что данный код можно встроить в любые ненужные страницы сайта, с помощью системы управления контентом (CMS).
Заголовки страниц X-Robots-Tag
Это альтернатива тегу robots, только код прописывается не в теле HTML, а в HTTP заголовке страницы, который не виден пользователям: X-Robots-Tag: noindex, nofollow.
Удаление из индекса с помощью инструментов вебмастеров
Для того чтобы быстро страница или раздел исчез из индекса поисковой системы, нужно зайти в раздел Webmaster Яндекса, или в Google Webmaster Tools, и вручную удалить ненужные УРЛ. При этом предварительно необходимо закрыть от повторной индексации страницы в файле robots.txt, с помощью мета-тегов или заголовков. Пользуясь этим способом, страницы выпадут из индекса в течение нескольких часов. Однако с Яндексом, бывают задержки, вплоть до ожидания следующего апдейта поискового индекса.