Здравствуйте.
Я составил robots для сайта (внизу указаны боты, чтобы сайт не посещали): https://goo.gl/PZ1qYW
Вопросы:
1. Корректно ли составлен robots.txt? Если есть замечания, то напишите.
2. Нет ли там каких-то пересечений (чтобы не получилось так, что для ботов перекрыл посещение сайта в Disallow: / , а в итоге перекрыл для всех поисковиков)?
- 08.08.2017 06:02
- Регистрация: 21.07.2014
- Сообщений: 207
- Репутация: 7
- 09.08.2017 08:50Так в вебмастере есть же тестер))Корректно ли составлен robots.txt? Если есть замечания, то напишите.
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
Правильно составил utm метку? | Общие вопросы поисковой оптимизации | 4 | 12.05.2016 20:25 |
Директива Host правильно ли прописано в robots.txt | Общие вопросы поисковой оптимизации | 8 | 10.02.2015 12:37 |
Правильно ли составлен файл robots.txt для Wordpress | Общие вопросы поисковой оптимизации | 11 | 16.02.2014 19:31 |
Правильно ли я создал Robots.txt | Вопросы от новичков | 13 | 05.05.2012 04:21 |