Гугл индексирует страницы, запрещенные в robot.txt

(Ответов: 11, Просмотров: 2663)
Страница 2 из 2 Первая 12
  1. Новичок
    • Регистрация: 13.08.2012
    • Сообщений: 2
    • Репутация: 0
    вот что записано в robot.txt:
    если у вас в корневой директории этот файл с указанием запрещенных к индексации страниц называется именно robot.txt , то срочно его переименовывайте в robots.txt ! поскольку другие написания названия файла (robot.txt, Robots.txt) роботы не видят
    • 0
  2. Студент Аватар для Ripro
    • Регистрация: 04.11.2006
    • Сообщений: 60
    • Репутация: 9
    Аналогично, в индексе и закрытое в robots, и накрытое в noindex в коде страницы. Гугл сам решает что вносить в индекс, что не вносить. Не индексировать не более чем рекомендация. При чем в выдаче может быть заголовок закрытой страницы, а в сниппете "закрыто в robots.txt"
    • 0
Страница 2 из 2 Первая 12

Похожие темы

Темы Раздел Ответов Последний пост
Гугл не индексирует бэки
Google 12 22.07.2012 01:00
Гугл не индексирует сайт
Google 14 26.06.2012 22:05
Гугл не индексирует сайт
Вопросы от новичков 1 19.06.2012 04:23
Drugrevenue и запрещенные препараты
Партнерские программы 4 11.09.2009 02:18

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры