[rownong]

В одном из SEO справочников я читал о том, что для того чтобы не утекал статический вес, нужно убрать или запрещать индексировать поисковыми системами всю не нужную информацию на сайте.

Также, чтобы не дублировался контент на собственном сайте, следует закрывать от индекса сквозные блоки на сайте, чтобы страницы не были неполными дублями.

Вопросы:
1) Стоит ли делать запрет индексации определенной информации сайта? Потому что я слышал, что поисковые системы видят даже то, что запрещено к индексации.

2) Если вышеизложенное утверждение актуально, то посоветуйте, пожалуйста, какую информацию нужно закрывать от индексации на моем сайте. Скриншот: http://screencast.com/t/fHT8IvZp

3) Правильно ли я понимаю, что запрет индексации определенной информации сайта, делается через файл robots.txt, который загружается в корневой каталог сайта?

[mark3000]

Стоит ли делать запрет индексации определенной информации сайта?

Я бы запрещал только личные данные, да и то по возможности не используя robots.txt а просто ограничивая доступ. Если же речь о том что опасаетесь дублирования (страниц) то да, дубликаты лучше закрывать либо использовать каноникал. В дублировании блоков особо страшного нет ничего (если конечно это не более 50% контента страницы).

какую информацию нужно закрывать от индексации на моем сайте.

Вы как админ должны решить сами. В любом случае пробы и ошибки дают опыт, который дорогого стоит. Лучше жить своим умом, чем по подсказкам :)

Правильно ли я понимаю, что запрет индексации определенной информации сайта, делается через файл robots.txt, который загружается в корневой каталог сайта?

Есть еще тег noindex для контента и атрибут nofollow для ссылок (как в самом контенте так и в мета).

Вообще по большому счету всегда нужно исходить из целесообразности, то есть если нет необходимости в каком то контенте или ссылках то и размещать не нужно.

[VulkanPartner]

3) Правильно ли я понимаю, что запрет индексации определенной информации сайта, делается через файл robots.txt, который загружается в корневой каталог сайта?

Через robots вы можете запретить к индексации определенные страницы на сайте. Но роботы все равно будут их загружать, просто не ставить в выдачу. Но чтобы запретить часть контента на странице к индексации - robots не поможет...

[Nelegal]

2) Если вышеизложенное утверждение актуально, то посоветуйте, пожалуйста, какую информацию нужно закрывать от индексации на моем сайте. Скриншот: http://screencast.com/t/fHT8IvZp

Судя по тому, что я вижу, никакой из блоков сайта не нужно запрещать к индексации, кроме, наверное, инфы в блоке "Онлайн-счет".

[nn165m]

все от системы зависит
начните с системных папок и файлов

[rownong]

Есть еще тег noindex для контента и атрибут nofollow для ссылок (как в самом контенте так и в мета).

Есть некоторые вопросы:
1. noindex понимаю все ПС - и Яндекс и Google ?
2. noindex можно/целесообразно использовать для закрытия части контента на страницах, чтобы уменьшить дублирования страниц между собой (пример: сквозные блоки http://screencast.com/t/dmyy1Xx8B3Yx ).
3. атрибут nofollow для ссылок используется для запрета передачи веса ссылок ТиЦ и PR определенному сайту (акцептору). При этом если ссылка будет стоять на странице с атрибутом nofollow, то вес все равно будет уходить, но не определенному сайту (акцептору), а будет уходить в никуда?
Т.е. смысла ставить атрибут nofollow на ссылку нет, лучше ее просто со страницы убирать?

---------- Сообщение добавлено 18:09 ---------- Предыдущее 18:08 ----------

Через robots вы можете запретить к индексации определенные страницы на сайте. Но роботы все равно будут их загружать, просто не ставить в выдачу. Но чтобы запретить часть контента на странице к индексации - robots не поможет...

Я правильно понял, что:
1. файл robots.txt - для запрета индексации целых страниц
2. тег noindex - для запрета определенного контента на странице
3. тег nofollow для запрета передачи веса ссылок ТиЦ и PR сайту акцептору

---------- Сообщение добавлено 18:18 ---------- Предыдущее 18:09 ----------

Судя по тому, что я вижу, никакой из блоков сайта не нужно запрещать к индексации, кроме, наверное, инфы в блоке "Онлайн-счет".

Пример: http://screencast.com/t/iim4j8GjrHBk

В примере, на всех страницах есть:
> сквозное меню с ссылками на разделы
> сквозной информационный блок, просто текст без ссылок

Исходя из этого, вопросы:
1. Целесообразное ли закрывать от индекса сквозное меню с ссылками на разделы? С одной стороны это дубль на всех страницах. С другой стороны это элемент перелинковки.
2. Целесообразное ли закрывать от индекса сквозной информационный блок, просто текст без ссылок? Т.к. это дубль на всех страницах.

[kuzmi4]

Запрет страниц сайта, а так же других файлов и папок делается через файл robots.txt
Так же запрет страниц можно сделать мета-тегом: <meta name="robots" content="noindex,follow" />
Атрибут rel="nofollow" - что бы роботы не ходили по ссылкам (вес не передается, но утекает)
Теги <noindex>текст</noindex> - запрещают к индексации контента внутри их, работает только для Яндекса! (для валидного кода используйте <!--noindex-->текст<!--/noindex-->)
ЗЫ. Все эти теги, это рекомендации (не строгие предписания) поисковикам. ПС сами решают индексировать или нет, ходить по ссылкам или нет.
--
На Вашем сайте запретите все что не нужно поисковиками. Например: служебные папки, админку, страницу личного кабинета, вход на сайт, страницу регистрации, восстановления пароля, корзину, и т.д. Насчет CSS - сам незнаю, под вопросом.
--
Насчет <noindex> - наверное Яндексу бы понравилось, если б им все запретить за исключением уникального контента страницы. Запретить меню, футер, боковые колонки. Скармливать новые страницы через карту сайта, и пользоваться только контекстной перелинковкой?
Как вы считаете?

[mark3000]

Есть некоторые вопросы:
1. noindex понимаю все ПС - и Яндекс и Google ?
2. noindex можно/целесообразно использовать для закрытия части контента на страницах, чтобы уменьшить дублирования страниц между собой (пример: сквозные блоки http://screencast.com/t/dmyy1Xx8B3Yx ).
3. атрибут nofollow для ссылок используется для запрета передачи веса ссылок ТиЦ и PR определенному сайту (акцептору). При этом если ссылка будет стоять на странице с атрибутом nofollow, то вес все равно будет уходить, но не определенному сайту (акцептору), а будет уходить в никуда?
Т.е. смысла ставить атрибут nofollow на ссылку нет, лучше ее просто со страницы убирать?

1. В принципе должны понимать, по крайней мере так заявлено, но 100% уверенности в том, что закрытая в noindex информация останется конфиденциальной нет. К тому же алгоритмы постоянно меняются и совсем не факт, что тег будет актуален через год.

2. Формально noindex предназначен для сокрытия технической информации, но если закрывать повторяющиеся блоки, то возможно ничего дурного не будет. Однако стоит учесть, чисто логически, если пользователь много чего скрывает, то это может вызывать подозрения (другими словами много noindex то же не есть правильно).

3. nofollow скорее для запрета перехода по этой ссылке, тиц и pr это уже вторичное. В целом, по хорошему вообще не нужно использовать этот атрибут. Самый верный способ это правильное планирование и структура. Если проводить аналогию, то лучше поддерживать свое здоровье, чем потом пить лекарства.

Ссылка с атрибутом nofollow это "мертвая ссылка" (для ПС, а так траф. прямой может идти конечно). К тому же не нужно бояться исходящих ссылок на другие сайты. Если сайты хорошие и тематические это даже даст определенный плюс, так как зачислит вас в "хорошую компанию".

Я всегда говорю, лучше правильно планировать, чем потом исправлять и не нужно бояться что то менять, ни дизайн ни схему перелинковок ни контент. Это нормальный процесс. Если сайт изменяется то он живет и ПС это прекрасно отслеживают. Но конечно здравый смысл никто не отменял, все хорошо в меру :)

[Feanor184]

Прошу прощения, чтобы не плодить новых тем задам вопрос тут, т.к. близок по тематике: Можно ли как-то сделать noindex для кусков текста? Может быть прямо в форматированном тексте тегами прописать там где нужно:) Например, я хочу получить на выходе 100% авторский контент, скопировал статью на сайт - повесил в noindex и пишем, скажем, свой авторский обзор на нее. Небольшое извращение, но все-же - хотелось бы знать - реализуемо ли это?)

[Nelegal]

1. Целесообразное ли закрывать от индекса сквозное меню с ссылками на разделы? С одной стороны это дубль на всех страницах. С другой стороны это элемент перелинковки.

не надо. насколько я знаю, так никто не делает, тем более, раз это элементы перелинковки

2. Целесообразное ли закрывать от индекса сквозной информационный блок, просто текст без ссылок? Т.к. это дубль на всех страницах.

Можно и не закрывать, но если закроете, хуже точно не будет

---------- Сообщение добавлено 10:32 ---------- Предыдущее 10:30 ----------

Feanor184, а не проще ли просто взять чужую статью в блок "Цитата" и в конце поставить на нее ссылку, таким образом показав ПС, что вы не плагиатор?