Всем привет!
Обнаружила, что индексируются у сайта страницы такого типа _site.ru/author/admin/, _site.ru/2012/02/15/, _site.ru/2012/02/20/ и еще несколько подобных с датами.
Подскажите пожалуйста, что надо прописать в robots.txt, чтобы убрать страницу с инфой про админа и все эти страницы с датами. полагаю,что это не хорошо, что они индексируются
- 23.09.2018 21:25
- 23.09.2018 23:29
dolem, судя по этой теме (http://webmasters.ru/forum/f10/tonko...60ya%5D-31599/) это можно сделать так:
Disallow: /2012/
Disallow: /2013/
Так же и прописать заперт на админку.
И в теме расписывается как грамотно составить robots.txt для нескольких CMS, советую прочитать.
Тэги топика:
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
Срочно нужен Копирайтер ! | Копирайтинг, переводы, постинг | 4 | 11.10.2015 13:09 |
Копирайтер. Срочно. Тематика продажа бизнеса | Копирайтинг, переводы, постинг | 0 | 15.07.2015 15:43 |
толковый копирайтер. срочно | Копирайтинг, переводы, постинг | 4 | 13.02.2013 13:31 |
Получите 300р на продвижение от megaindex! | Дайджест блогосферы | 6 | 31.08.2010 09:58 |