[malahovnet]

Собственно далеко избитая тема, но вариантов решения вопроса несколько, поэтому решил спросить может найдутся какие-нибудь другие решения и советы
Сайту около 9 мес.,на сайте около 70 статей(по сем.ядру), тиц 10, посещаемость 200-250
Рубрики(5 шт.) с создания сайта закрыты в robots от индексаци, но сами рубрики являются неплохими среднечастотными запросами.

robots, который сейчасt

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: сайт.ru

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Sitemap: http://сайт.ru/sitemap.xml

[свернуть]

Погуглив, пришел к решению оптимизировать рубрики и открыть их для индексации в роботс. Не буду вдаваться в подробности как, но подготовил и вывел по одной статье с картинкой в каждую рубрику поверх статей-анонсов,находящихся в каждой рубрике.
Собственно вопрос: сейчас, чтобы открыть рубрики в robots.txt нужно тупо удалить эту строку(в 2 местах) Disallow: /category ?
Как отнесутся поисковики к этому? Я так понимаю сразу появятся дубли страниц-анонсов(которые расположены до тега more), так как они были идеентичны с самой статьей(не уникализировались).
Итого, такое решение...удалить строку Disallow: /category, а добавить Disallow: /page/ (это мы закрываем от индексации все страницы рубрики, кроме главной)

robots, после открытия рубрик

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /page/
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: сайт.ru

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /page/
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Sitemap: http://сайт.ru/sitemap.xml

[свернуть]

Кто что скажет? Может есть другие варианты и стоит ли вообще оно того?

[malahovnet]

Вопрос мой затерялся с утра, так и не услышал ни ответа ни совета...пойду открывать рубрикии))

[xakep1]

А почему для Яндекса не прописываете карту сайта?

[malahovnet]

А почему для Яндекса не прописываете карту сайта?

карта сайта вроде как прописана или я чего-то незнаю?ее что отдельно еще прописывают для яндекса?поделитесь...

[xakep1]

Да, для Яндекса нужно прописывать отдельно, пример тут.

[malahovnet]

Да, для Яндекса нужно прописывать отдельно, пример тут.

в этом robots как я вижу категории закрыты

[xakep1]

malahovnet, так категории полные дубли статей, поэтому закрыл от индексации, чтобы не было дублей. Или я не прав?

[Pryanik_IT]

xakep1, не всегда категории будут полными дублями, думаю зависит от тематики сайта ) ну на том, что вы кинули пример robots конечно да, стоит категории прикрыть) у меня сайт информационной тематики по гаджетам, сделан на WP, всего 10 рубрик и ни одна не была закрыта с самого рождения проекта. Проблем не наблюдалось, каждая рубрика имеет уникальные Title и Description, трафик идёт и на рубрики, при чем без проблем )

[xakep1]

ТС, Вы бы дали адрес сайта?! Так бы можно было подробнее что-то сказать...

[Brovik]

все правильно, я категории сразу открыл (1 страницы), там у меня еще прописано описание категорий, так что для продвижения надо. А вот страницы 100% закрывать надо.