как закрыть страницы в robots.txt

(Ответов: 5, Просмотров: 741)
  1. Студент Аватар для dolem
    • Регистрация: 17.05.2012
    • Сообщений: 58
    • Репутация: 2
    Всем привет! Прошу помощи)

    Сайт был взломан, была залита куча левых страниц, которые попали в индекс. Я в шоке,блин.

    В Яндексе сказали ждать, когда вылетят из индекса (сейчас эти страницы выдают ошибку 404), либо через роботс закрыть, но я не очень разбираюсь в этом. Поэтому прошу подсказать знающих людей, что нужно прописать в роботс.тхт.

    Страницы такого вида: site.ru/goroda/page1537.html, site.ru/internet/page302.html.

    Предполагаю, что нужно прописать что-то типа этого:

    Disallow: /goroda
    Disallow: /internet

    Еще буду благодарна, если кто подскажет, как с google быть - что нужно сделать, чтоб он выплюнул эти страницы.

    Заранее спасибо всем откликнувшимся
    • 0
  2. Banned
    • Регистрация: 25.06.2015
    • Сообщений: 176
    • Репутация: 56
    Если страница выдает 404 - её не существует, а если её не существует то и закрывать нечего. Само повылетает.
    • 0
  3. Дипломник Аватар для Stza
    • Регистрация: 20.04.2015
    • Сообщений: 200
    • Репутация: 64
    dolem,
    Disallow: /page

    В случае, если вдруг у вас ваши документы начинаются на page, например /pagespeed , то или переименуйте её и склейте 301 редиректом, если таких страниц много то пишите будем изобретать)
    Шаблонные вещи победить легко
    • 0
  4. Студент Аватар для dolem
    • Регистрация: 17.05.2012
    • Сообщений: 58
    • Репутация: 2
    Stza, насчет переименования и склейки - мне это не очень понятно)
    После взлома появились 4 директории или как это называется:
    site.ru/goroda/
    site.ru/rasteniya/
    site.ru/ucheba/
    site.ru/internet/
    site.ru/jelezo/

    Ну и в каждой директории куча страниц такого типа, например site.ru/goroda/page2235.html

    До взлома у меня в роботс было прописано Disallow: /page/.

    В данном случае надо наверное как-то именно добавленные взломщиками директории закрыть: все эти rasteniya, goroda и остальную хрень :-)
    • 0
  5. Дипломник Аватар для Stza
    • Регистрация: 20.04.2015
    • Сообщений: 200
    • Репутация: 64
    dolem, ну тогда все просто,
    Disallow: /goroda/
    И т.д.
    • 1

    Спасибо сказали:

    dolem(13.08.2015),
  6. Студент Аватар для dolem
    • Регистрация: 17.05.2012
    • Сообщений: 58
    • Репутация: 2
    Stza,Вам просто, а мне не очень

    спасибо за помощь!)
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Закрыть от индексации в robots.txt
Общие вопросы поисковой оптимизации 9 12.11.2013 17:34
Как закрыть теги и страницы
Вопросы от новичков 6 06.02.2013 16:06
помогите закрыть страницу в robots.txt
Вопросы от новичков 3 29.03.2012 16:03
помогите закрыть страницу в robots.txt
Web программирование 3 29.03.2012 16:03
Что закрыть в robots.txt для bbPress?
Вопросы от новичков 1 15.03.2012 15:53

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры