Kactuar, я тоже так думаю. меня смущает это из хелпа яндекса:
User-agent: Yandex
Disallow: # то же, что и Allow: /
User-agent: Yandex
Allow: # то же, что и Disallow: /
- 07.11.2011 11:02
Спасибо сказали:
Kactuar(09.11.2011), - 09.11.2011 08:45
webb,спасибо интересная особенность, я раньше не замечал её, но всё равно если так, то в вашем примере сначала идет Allow который превратиться в Disallow, а потом Disallow который превратиться в Allow, а поскольку мы знаем что последняя запись является решающей, то сайт всё же будет индексироваться без ограничений
- 12.02.2012 20:06
Вообще то Allow: нет в стандартах, по этому не советую вообще её использовать. Может поискать какие поисковики поддерживают Allow. А вообще проще использовать всё по стандартам, я считаю этого достаточно.
Тэги топика:
Похожие темы
| Темы | Раздел | Ответов | Последний пост |
|---|---|---|---|
robots.txt | Web программирование | 4 | 10.08.2011 15:47 |
Robots.txt | Обучающие статьи | 12 | 30.06.2011 11:29 |
robots.txt | Вопросы от новичков | 3 | 18.03.2011 16:03 |
robots.txt | Прочее | 0 | 18.03.2011 11:44 |
dle robots.txt | Web программирование | 3 | 08.01.2011 22:16 |


