FAQ по robots.txt

(Ответов: 12, Просмотров: 1435)
Страница 2 из 2 Первая 12
  1. Новичок Аватар для webb
    • Регистрация: 15.03.2011
    • Сообщений: 27
    • Репутация: 11
    Kactuar, я тоже так думаю. меня смущает это из хелпа яндекса:
    User-agent: Yandex
    Disallow: # то же, что и Allow: /

    User-agent: Yandex
    Allow: # то же, что и Disallow: /
    • 1

    Спасибо сказали:

    Kactuar(09.11.2011),
  2. Новичок Аватар для Kactuar
    • Регистрация: 19.09.2011
    • Сообщений: 19
    • Репутация: 1
    webb,спасибо интересная особенность, я раньше не замечал её, но всё равно если так, то в вашем примере сначала идет Allow который превратиться в Disallow, а потом Disallow который превратиться в Allow, а поскольку мы знаем что последняя запись является решающей, то сайт всё же будет индексироваться без ограничений
    • 0
  3. Гуру Аватар для Jeremen
    • Регистрация: 10.10.2011
    • Сообщений: 766
    • Репутация: 92
    • Webmoney BL: ?
    Вообще то Allow: нет в стандартах, по этому не советую вообще её использовать. Может поискать какие поисковики поддерживают Allow. А вообще проще использовать всё по стандартам, я считаю этого достаточно.
    Время не любит, когда его тратят впустую.
    • 0
Страница 2 из 2 Первая 12

Похожие темы

Темы Раздел Ответов Последний пост
robots.txt
Web программирование 4 10.08.2011 14:47
Robots.txt
Обучающие статьи 12 30.06.2011 10:29
robots.txt
Вопросы от новичков 3 18.03.2011 15:03
robots.txt
Прочее 0 18.03.2011 10:44
dle robots.txt
Web программирование 3 08.01.2011 22:16

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры