Как убрать страницы из индекса Google и Яндекс

Как убрать страницы из индекса Google и Яндекс

SeoProfy
10 июня, 2014

Бывает ситуации, когда нужно не быстро проиндексировать страницы, а убрать их с результатов поиска.

Например, когда вы купили доменное имя, и создаете на нем совершенно новый сайт, который никак не связан с предыдущим. Или в индекс попали страницы, которые там не должны быть. Или вы просто решили закрыть раздел на сайте, который больше не актуален.

Как убрать страницы из индекса Google и Яндекс

Сегодня речь про то, как убрать страницы из индекса поисковых систем Google и Яндекс.

Мы детально рассмотрим основные способы, с помощью которых можно быстро убрать страницы из результатов поиска.

Давайте сразу перейдем к делу!

Способы убрать страницы из индекса поисковых систем:

1.    Удаление в инструментах Вебмастеров

Самым простым вариантом удаления страниц из индекса является удаление через Google Webmaster Tools и Яндекс Вебмастер.

Удаление страниц из поиска Google

Заходим в:

—       индекс Google

—       удалить URL адреса

Как убрать страницы из индекса Google и Яндекс

Далее нажимаем «создать новый запрос на удаление» и добавляем в него нужный адрес URL, который удаляем.

Как убрать страницы из индекса Google и Яндекс

После чего отправляем запрос на удаление страницы.

Далее URL страницы вноситься в список удаляемых, и переходит в статус ожидания.

Как убрать страницы из индекса Google и Яндекс

Сразу возникает вопрос, а сколько ждать?

Удаление страниц происходит очень быстро. Вот тот же сайт, через 8 часов, после добавления:

Как убрать страницы из индекса Google и Яндекс

Как убрать страницы из индекса Google и Яндекс

Даже при не малом объеме страниц, можно убрать их из индекса крайне быстро. Например, тот же сайт, немногим ранее:

Как убрать страницы из индекса Google и Яндекс

То есть было более 1200 страниц, потом стало пару десятков. А сейчас осталась практически одна главная страница.

Удаление страниц из поиска Яндекса

Переходим по ссылке: http://webmaster.yandex.ua/delurl.xml

Добавляем нужный адрес страницы, который необходимо удалить.

Как убрать страницы из индекса Google и Яндекс

В итоге можем получить такой ответ:

Как убрать страницы из индекса Google и Яндекс

То есть, все равно придётся сделать ниже описанные моменты, которые ускорят процесс удаления страниц из индекса Яндекса.

2.    Robots.txt

Файл robots.txt очень нужный инструмент, если дело идет к разрешению или запрещению индексации сайта от поисковых ботов.

Для того, чтобы удалить конкретные страницы с помощью robots.txt, то в сам файл дописываем такое:

Как убрать страницы из индекса Google и Яндекс

За не индексацию или исключение страниц  или разделов отвечает функция: «Disallow:».

Можно закрывать от индексации, как отдельные страницы, так и целые разделы сайта. То есть то, что вы не хотите индексировать поисковыми системами. Robots.txt учитывается Google и Яндекс.

Например – закрытие раздела:

User-Agent: *

Disallow: /razdel

Закрытие страницы:

User-Agent: *

Disallow: /stranica1.html

Закрытие страниц поиска:

User-Agent: *

Disallow: /seoprofy.ua/?s*

Про robots.txt скоро будет очень объемный пост с многими техническими моментами, которые как минимум стоит знать и применять для решения задач сайтов.

3.    404 ошибка

Так же важно создать страницу 404 ошибки, чтобы сервер отдавал 404. Тогда при очередной индексации сайта поисковыми ботами они выкинут эти страницы из индекса.

Ответ сервера 404 ошибки создается по умолчанию, так как если ее не делать, на сайте может быть множество дубликатов страниц, которые плохо повлияют на рост трафика.

Как убрать страницы из индекса Google и Яндекс

Хочу заметить, что удаление страниц из индекса таким способом может занять время, так как нужно дождаться ботов поисковых систем.

Это основные моменты, которые могут повлиять на удаление страниц из индекса поисковых систем.

В практике очень редко использует другое, как:

—       301 редирект

—       мета тег robots

—       X-robots-Tag

Но чтобы убрать нужные страницы из индекса наверняка, то лучше использовать все 3 выше описанные методы. Тогда это будет на порядок быстрее.

Так же можно просто удалить страницы и оставить лишь заглушку сайта, но не факт, что страницы пропадут из индекса очень быстро, поэтому лучше им в этом помочь.

Статьи которые дополняют:

5 способов удалить страницу из поиска Яндекса или Google

Как использовать robots.txt рекомендации Яндекса

Окончательное удаление страницы из индекса Google

 А какие способы вы еще знаете, чтобы быстро удалить страницы из поиска?

Понравилась статья? Получай свежие статьи первым по e-mail

Оцените статью:
совсем плохоплохонормальнохорошокласс (24 оценок, средняя: 4,38 из 5)
Загрузка...
  • Michael Ivanyshynets

    Спасибо! Очень своевременный пост. Как раз подумывал над удалением
    кучи страниц из индекса. Может, подскажете, стоит ли это делать. В общем,
    ситуация такая.
    — есть сайт, тематика – недвижимость
    — на сайте около 20 000 страниц.
    — Большинство страниц генерируются из специализированных баз. Это собственно детальные страницы каждого объекта недвижимости. Т.к. базами пользуются многие – уникальность этих страниц близка к 0.
    — Писать уникальный контент на них нет смысла, т.к. обновляются они довольно часто и их ооочень много.
    — в результате имеем около 120-150 чистых уникальных страниц (разделы сайта, блог и т.д.) и около 20 000 в supplemental.

    Стоит ли эти страницы удалить из индекса и закрыть от
    индексации на будущее?

    Просто сайт внутренне нормально оптимизирован, по сравнению с конкурентами, ссылки постепенно наращиваются, и качественные, но сайт ооочень медленно растет даже по НЧ запросам.

    • можно попробовать:

      — уникализировать страницы объявлений
      — как минимум мета тегами, генерацией текста, прочим

      если же нормально не поможет, тогда и убрать, хотя лучше пусть будут в доп результатах) я бы не удалял, а пытался уникализировать

      • Michael Ivanyshynets

        Спасибо за ответ. Тайтлы и описания уникализируются по формулам, а вот с контентом проблематично. Я просто не знаю, на сколько может повлиять на ранжирования «чистых» страниц сайта высокий процент страниц в доп.результатах (а в моем случае с таким кол-вом страниц это 99,5%)

  • Александр Рубцов

    В примере выше вы удалили 1200 страниц добавляя каждую в инструмент вебмастера?! Или можно как-то добавлять сразу разделы?

    • нет, используя 404 код + роботс txt)

  • Павел Горбунов

    как быстро работает способ для Google по удалению страниц через GWT в разделе Сканирование — параметры URL -Настройка параметров URL, если ввести туда какой-либо параметр?

  • OneMan Seo

    А как можно собрать 800 страниц в индексе Google, которые остались от предыдущего сайта и засунуть их все в — Удалить URL-адреса

  • Владислав Кириченко

    Добрый день!
    Смогу ли я удалить все страницы из индекса на старом сайте и засунуть текст из них на новый? Будет ли он считаться уникальным?

    • Алексей

      Добрый день. Получилось?

  • disquspak

    Прочитал статью, понравилась и на свою голову решил удалить старые страницы, которых нет по факту но гугл откуда то про них знает и каким то образом скопировал не ссылку на страницу, а весь домен. Заметил это не сразу, а только через час. Нажал отмена, но сайта в выдаче уже нет. Что делать ? Виктор, подскажи что делать в такой ситуации?

  • Получается удаляем из индекса, но не забываем саму страничку удалить(с 494 ошибкой) иди прописать роботс, мета тег, чтобы снова не попала назад.

  • Roman Dyagovets

    Если к сайту подключено в вебмастера по гуглу два пользователя, второй пользователь увидет что удалили урлы?

  • Ilnaz Bullet

    Есть ли способ отправить на удаление 3-4 тысячи урлов кроме как ручного? Интересует именно Яндекс и первый описанный тут способ.

  • Дмитрий

    А ведь действительно, если убрать страницы из поиска и воссоздать аналогичный контент на другом домене, будет ли он считаться уникальным? Или же поисковик запомнит контент и привяжет его к старому домену?