Как массово удалить 3000 страниц из индекса Яндекса и Гугла массово?

(Ответов: 6, Просмотров: 5076)
  1. Новичок Аватар для PeterStolypin
    • Регистрация: 04.09.2013
    • Сообщений: 11
    • Репутация: 0
    • Webmoney BL: ?
    1,5 месяца назад вирус нагенерил тонны спамерских страниц типа таких

    /mr-juve-miscate-asa.htm

    Закрыл их еще тода через роботс
    Код:
    Disallow: /*.htm$
    Но они практически не вылетают из индекса и их сейчас около 3000.

    Попробовал для теста 1к ссылок таких закинул в индексгатор, чтобы робот на них зашел, увидел, что страницы закрыты в роботсе и ушел. Но гугл на это прислал сообщение о том, что сайт взломан и привел в пример несколько урлов из тех, что я кинул в индексгатор. Видимо подумал он, что это спам-атака. Страницы не повылетали, ошибок 404 в панеле прибавилось.

    Как посоветуете удалять это все для яндекса и гугла массово?
    • 0
  2. Гуру
    • Регистрация: 09.10.2011
    • Сообщений: 1,816
    • Репутация: 251
    Для гугла
    Чтобы полностью исключить вероятность появления контента страницы в индексе Google, даже если на нее ссылаются другие сайты, используйте метатег noindex или x-robots-tag. По мере сканирования страниц, робот Googlebot обнаружит метатег noindex и не станет отображать страницу в индексе. HTTP-заголовок x-robots-tag рекомендуется использовать, чтобы исключить из индекса файлы, формат которых отличается от HTML (например, изображения или другие типы документов).
    только так.
    • 0
  3. Дипломник Аватар для kreg22
    • Регистрация: 06.12.2009
    • Сообщений: 243
    • Репутация: 101
    Мне в сентябре сайт ломали, залили дор на 15к страниц. Все это дело попало в индекс. Удалил страницы и больше ничего не делал.

    1.Гугл где-то через 3 месяца выплюнул их из индекса

    2. В яндекс вебмастере до сих пор показывается 4к страниц, хотя прошло уже 7 месяцев!
    • 0
  4. work hard Аватар для zhurik
    • Регистрация: 20.11.2012
    • Сообщений: 1,698
    • Репутация: 1041
    • Webmoney BL: ?
    Есть функция "удалить урл" в кабинетах вебмастеров Яндекс и Гугл. Массово можно удалить софтом Comparser, но он платный.
    • 1

    Спасибо сказали:

    PeterStolypin(11.05.2015),
  5. Опытный Аватар для Rush Agency
    • Регистрация: 27.01.2015
    • Сообщений: 276
    • Репутация: 27
    Через функцию удалить url в Google Webmaster Tools можно удалить только 500 страниц. В Яндекс.Вебмастере такой функции нет.

    Страницы надо удалить физически, оставлять на сайте и мета-тег noindex нет смысла прописывать, так как это расходует краулинговый бюджет сайта.

    Полезно прописать в robots.txt , что вы и сделали, через время страницы выпадут из поисковых систем.

    Нужно обратить внимание на 404 ошибки в Google Webmaster Tools, возможно ссылки на мусорные страницы остались где-то на полезных страницах сайта.
    • 0
  6. work hard Аватар для zhurik
    • Регистрация: 20.11.2012
    • Сообщений: 1,698
    • Репутация: 1041
    • Webmoney BL: ?
    Цитата Сообщение от Rush Agency Посмотреть сообщение
    В Яндекс.Вебмастере такой функции нет
    https://webmaster.yandex.ru/delurl.xml
    но пачкой как в гугле не удалить, только если автоматизировать.

    Цитата Сообщение от Rush Agency Посмотреть сообщение
    мета-тег noindex нет смысла прописывать, так как это расходует краулинговый бюджет сайта.
    если дописать в мета тег nofollow, то не будет расходовать. Но вообще вы правы - лучше физически удалить и закрыть от индексирования.
    • 1

    Спасибо сказали:

    ruslang84(14.05.2015),
  7. Опытный
    • Регистрация: 27.03.2015
    • Сообщений: 265
    • Репутация: 35
    лучше 301-м редиректом слить все страницы на одну, и ее заблочить в роботс.
    с индекса быстрей по вываливаются.
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Как массово приглашать в группу ВК по id ?
Социальные сети 11 20.11.2014 15:10
Удалить сай-многостраничник из индекса Гугла.
Google 13 09.09.2013 19:50
Как массово поднять позиции?
Вопросы от новичков 11 24.06.2013 03:43
как массово переименовать картинки?
Прочее 3 28.03.2012 21:42
Google массово выкидывает страницы
Google 8 25.12.2009 18:17

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры